2025-01-15 TIL (A/B Test)

아티클 # 21

A/B 테스트 제대로 이해하기: ④ A/B 테스트 표본 크기와 유의미한 결과의 관계 | 요즘IT

 

1. 아티클 주요 내용 요약

• 핵심 주제: 표본 사이즈와 유의미한 결과가 무슨 상관이 있냐?
• 주요 내용:
  • 정확한건 전수 조사인데 불가능하다.
  • 표본이 많을 수록 좋은 것 같다
  • 차이가 커야 할 것 같은데, 이 트래픽에서 고작 이정도 차이로 되나?

 

2. 인사이트 및 배운 점

• 배운 점 : 표본이 크면 클수록 같거나 더 작은 차이로도 유의미하다는 평가를 얻어낼 수 있다.
  
  
• 즉, 두 그룹의 차이가 아무리 적어도 표본만 크면 충분히 유의미할 수도 있다.

 

3. 추가 학습 계획

페이지 5에서 계속...

 

그럼 대체 표본은 어느 정도 필요한 건가?
이 정도 표본이라면 어느 정도 차이여야 유의미한 건가?

 

---