A/B 테스트, 다르게 보이는 모든 것들은 대체로 틀렸다 Part 2
darami
본 내용은 책 'A/B 테스트'를 참고하여 쓴 글입니다. Chapter 3 트위먼의 법칙과 실험의 신뢰도 트위먼의 법칙이란..그런 것 같다. 본인이 회사 모니터 옆에 붙여 놓은 '의심하기' 라는 문구처럼, 흥미로워 보인다거나 특이한 데이터가 있으면 대부분 틀렸으니 여러가지로 쪼개든지 해서 다시 검증해보라는 것.. 이번 장은 어떤 부분들을 의심해보아야하는지 구체적인 사례를 제시해준다. That's 유용! 트위먼의 법칙 "흥미롭게 보이거나 다르게 보이는 모든 것들은 대체로 틀렸다." 통계 결과의 잘못된 해석 통계적 검정력 부족 일반적인 실수 : 지표가 통계적으로 유의적이지 않다고 해서 실험 효과 (Treatment Efect)가없다고 가정하는 것. 실험이 우리가 보고 있는 효과 크기를 탐지하기에는 검정력이 ..