A/B Test 2

67-(2). A/B Test

학습주제A/B Test 결과 분석이란?주요 학습 내용A/B 테스트 결과 분석은 과학이 아닌 예술경험이 중요하다.가설을 잘 세워야 배우는 것이 있다.결과 분석은 객관적이고 공개되어야한다.- AB 테스트 실험을 제안한 사람이 분석하는 것은 안좋다.- 다양한 사람들이 모인 자리에서 결과를 분석하고 여러 의견을 듣는 것이 좋다ex) 1.  AB테스트 주간미팅, 시니어 데이터 분석가들이 돌아가면서 수행 (No를 잘 할 수 있어야한다.)      2. 처음 40분은 기존 테스트들중 결과가 보이는 것들을 리뷰 (p-value가 유의미 한 것들)      3. 마지막 20분은 새로운 AB 테스트 제안들을 리뷰하고 스케줄Outlier가 A/B 테스트에 미치는 영향어느 서비스나 매출 등에 있어 큰 손들이 존재이런 큰 손들..

데이터분석 2024.04.09

66-(1). A/B test

학습 주제데이터 팀의 미션과 발전 단계A/B Test란 무엇인가?A/B Test 시스템 구성Traffic을 A/B로 나누는 방법 이해하기주요 학습 내용데이터 조직의 미션은?신뢰할 수 있는 데이터를 바탕으로 부가  가치 생성- Data is the new oil- but data can be a liability- 데이터의 잘못된 노출과 사용으로 인한 위험을 줄여야 한다.데이터 조직이 하는일Decision Science고품질 데이터 기반으로 의사 결정권자에게 입력 제공- 데이터를 고려한 결정을 가능하게 해줌 vs. 데이터 기반 결정- ex) 데이터 기반 지표 정의, 대시보드와 리포트 생성 등을 수행Product Science고품질 데이터를 기반으로 사용자 서비스 경험 개선 혹은 프로세스 최적화- 머신 러닝..

데이터분석 2024.03.05