• 원본

1. 큰 그림: 우리가 하는 질문

“표본에서 보이는 A/B 차이가 우연인가,

아니면 모집단에서도 실제로 존재하는 효과인가?”

• 전체 유저(모집단)는 볼 수 없음 → 표본으로 판단
• 표본은 항상 우연(노이즈) 으로 흔들림
• → 이 흔들림을 고려해 판단하는 게 통계적 가설검정

2. 가설의 출발점: H0 / H1

• H0 (귀무가설): “A와 B는 차이가 없다”
• H1 (대립가설): “A와 B는 차이가 있다 (또는 B가 더 낫다)”

👉 왜 H0부터?

→ “우연으로 설명 가능한지”를 먼저 검증하기 위해서

3. 유의수준 α (Significance Level)

“H0가 사실인데도, 내가 실수로 기각할 확률을

여기까지는 감수하겠다”라는 기준선

• 보통 α = 0.05 (5%)
• 의미:
  • Type I Error(거짓 양성) 허용 한도
  • “H0가 참인데도, 잘못 버릴 확률을 최대 5%까지 허용”

📌 역할: 판정 기준선(리스크 허용치)

4. 표본 평균은 왜 흔들릴까? → 표준오차(SE)