Contents

• 귀무가설이란?

본 포스팅은 귀무가설에 관하여 정리하였습니다.

---

귀무가설이란?

Variation A와 Variation B의 전환율(Conversion rate)를 각각 $p_a$, $p_b$라고 했을 때, 귀무가설 $H_0$과 대립가설 $H_1$은 아래와 같이 표현된다.

즉, 귀무가설은 두 Variation에 차이가 없음을 의미한다. 이때, 유의성 검정은 귀무가설이 사실임을 전제로 가설검증을 수행하는 것이다. 왜냐하면, 귀무가설이 기각 될 경우, 귀무가설과 대립되는 가설인 대립가설(즉, 두 Variation간에는 유의미한 차이가 있다)이 사실임을 입증하게 되는 것이다.

따라서, 실험을 진행하는 동안 얻은 데이터를 통해 귀무가설을 기각시킬 것인지 시키지 않을 것인지 결정해야만한다. 여기서 발생한 문제는 귀무가설의 기각 여부를 완벽하게 결정할 수 없다는 점이다. 실험 결과 표본에서 얻은 데이터이기 때문에 항상 오차가 발생한다. 즉, 현재 시간에는 Variation A가 좋다는 결론이 나올지 몰라도 차후에는 Variation B가 더 좋다는 결론이 나올 수 있다. (즉, 1종 오류 혹은 2종 오류를 범할 수 있음, 더불어 1종오류의 경우 2종 오류보다 훨씬 위험하기 때문에 마케팅 분석에서는 상대적으로 더 경계할 필요가 있다고 한다.)

여기서 1종 오류에 대한 기준은 5%이다. 즉, “없는데 있다고” 정의하는 오류 수준을 5%로 제약한다는 의미이다. 이는 p-value <0.05를 의미한다.

---

References

• 귀무가설, 위키백과