
355
7
장
실험 분석
석 관점에서 실험은 크게 두 가지 유형으로 나뉘며, 결과가 이진형인 실험 (카이제곱 검정 사
용)과 연속형인 실험(
t
-검정 사용 )이 있습니다.
7.3.1
카이제곱 검정
결과가 이진형인 실험은 특정 액션의 발생 여부만 확인합니다. 사용자가 등록을 완료하는지 완
료하지 않는지, 고객이 웹사이트 광고를 클릭하는지 클릭하지 않는지, 학생이 졸업하는지 졸업
하지 않는지 등이 이에 해당합니다. 이런 실험에서는 각 사용자군에서 해당 액션이 발생한 비
율을 계산합니다. 분모는 전체 액션 수이고, 분자는 완료된 액션 수입니다. 이렇게 계산한 지표
는 완료율, 클릭률, 졸업률 등의 비율이 됩니다.
카이제곱 검정
Chi
-
Squared
Test
은 카테고리 타입 변수에 대한 통계 검정 방법으로, 각 사용자군에서
특정 행동의 발생 비율에 유의미한 차이가 있는지 확인합니다.
6
카이제곱 검정을 수행하기 위
한 데이터는
분할표
contingency
table
형태로 정리해 두 가지 속성의 지점별로 관측 빈도를 확인하
기 쉽도록 합니다. 이러한 피벗에 익숙하다면 분할표가 마치 피벗 테이블처럼 보일 겁니다.
이제 모바일 게임 데이터셋을 활용해 카이제곱 검정 방법을 살펴봅시다. 프로덕트 매니저가 신
규 플레이어에게 게임 방법을 안내하고자 여러 화면으로 구성된 온보딩 기능을 새로 출시했다 ...