*본 포스팅은 구글 데이터 사이언티스트 출신인 DataInterview 님의 유튜브 영상을 참고해 만들어졌습니다 a/b 테스트는 기본적으로 a와 b 옵션 중 우리 프로덕트를 개선하기 위해 어떤 선택을 할 것이냐는 문제를 수치를 이용해 의사결정을 내리기 위한 과정 중 하나다. 지금까지 내가 알고 있던 a/b 테스트 메트릭은 그저.. 랜덤한 집단인 a 그룹과 b 그룹에 각각 a 행동과 b 행동을 하고, 클릭율, 전환율, 오픈율과 같은 수치를 이용해 뭐가 더 나은 것인지 판단하는 것이다. 그런데, 항상 궁금했던 점이 있다. "어디까지가 통계적으로 유의미한 지표인가", 만약 메트릭들을 비교했을 때 수치상으로 5프로 정도의 차이가 났다면 이는 통계적으로 유의미한 결과인가? , "p-value 만 참고해 의사결정을..

나는 스타트업에서 일하는 데이터 분석가와 데이터 사이언티스트 그 사이의 일을 하고 있다. 최근에 회사 내외부용으로 쓸 수 있는 중요한 지수인 KPI (Key Performance Indicator, KPI) 를 만드는 것을 고민하다가 내가 발견하고 테스트해본 방법들을 기록하기 위해 이 포스팅을 써보려고 한다 우선 당연히 지수를 만드는데 딱 어떻다할 정해진 방법은 없다. 너무나 당연히. 비즈니스에서 어떤 가치에 초점을 둘 것이냐는 문제로 직결되기 때문에 지수를 활용할 주체의 사람들과 다같이 이야기해봐야 좋은 결론이 날 수 있다. 이번 시즌에 이 프로젝트에서 분석가인 나의 role 은 수학적으로 어떻게 하면 좀 더 안정적인 지수를 만들지 연구하고 테스트해서 합의점을 찾는 부분이었음. 1.항목별 가중치에 대해..

태블로 자동화 가능한가요 ! 네 가능합니다!! 유로 버젼만 가능하고 유료 버젼에서 쓸 수 있는 태블로 서버랑 파이썬 라이브러리를 API 로 연결해서 할 수 있어요! 이걸로 반복문을 돌릴 수 있게 되었습니다 우리는.. 데이터를 리프레쉬해서 만드는것도 되구요 저처럼 pdf 추출 자동화도 가능함! 그런데 한국어로 된 이걸 잘 설명해주는 문서가 없어서 제가 씁니다... 태블로 이시키들 한국 지사를 안 가지고 있어요 ㅠ ㅠ salesforce 한국쪽에다가 전화하면 영업팀만 받고 기술지원팀은 나몰라라야 뭔가 궁금한거 물어보려면 일본 지사 사람이랑 컨택해야돼 (근데 한국인 담당자가 있음) 저는 유료판 구매에서 라이선스부터 애를 먹고 태블로 측과 많은 멜을 주고 받았어요 하지만 도움이 되지는 않았답니다 ㅋㅋㅋㅋㅋㅋㅋㅋ..

*회사에서 보고듣고배운것 일반화시켜 기록하기 *위 게시글은 adobe analytics 의 32개 글로벌 국가의 웹사이트별 AARRR별 segement 와 breakdown 을 이용해 분석을 하며 인사이트를 얻기 위해 세운 가설들, 검증했던 방법들을 정리한 게시글입니다 (상황) 웹사이트의 전체 방문 트래픽이 전년도에 비해 올랐다. 왜 올랐는지 밝혀내자 가설1. 특정 국가의 트래픽이 올랐다 -> 일단 국가별로 월별로 트래픽 추이를 살펴보고, 눈에 띄는 지표가 있는지 확인한다 -> 주요국 위주로 먼저 확인하면서 비등비등한 portion 으로 올랐는지, 특정 국가에서 확 올랐는지 확인해본다 가설 2. 특정 이벤트나 특정 시기에 외부적인 이유로 트래픽이 올랐다 (특정 이벤트) -> 유입종류별로 어떤 분야에서 많..