
Chapter 6-
90일 주기를 활용해 아이디어 검증하기
245
고 이에 대해 이야기할 준비를 해야 했다. 우리 팀은 마치 마법처럼 ‘큰’ 실험을
더 작은 실험들로 쪼개는 창의적인 방법을 찾기 위해 나섰다. 이렇게 피드백 루프
의 속도를 높이니 몇 가지 대규모 계획이 효과적이지 않음을 조기에 확인하고 다
른 계획에 대한 신뢰를 높일 수 있었다. 이러한 두 결과를 모두 진전이라고 볼 수
있다.
77
. 항상 대조군 활용하기 . 항상 대조군 활용하기
진행 상황은 상대적이다. 어떤 실험이 효과를 보이고 있는지 확인하려면 이전 상
태를 기준점으로 활용할 수 있어야 한다. 과학 실험에서 대조군을 만드는 것과 마
찬가지이다.
이 책 후반에서는 고객 공장을 주 단위 (또는 동일집단 ) 기준점으로 삼는 방법을
단계별로 설명한다. 이 방식은 대조 기준선을 정하기 위한 합리적인 출발점이다.
우리가 실험에서 능가하고자 하는 기준점을 만들어주기 때문이다. 이것은 일종의
직렬 분기 테스트이며, 아직 사용자가 많지 않거나 중복되는 실험을 동시에 실행
하지 않고 있을 때 가능하다.
즉, 대조군을 만드는 최적의 표준은 병렬 분기 테스트를 이용하는 것이다. 병렬
분기 테스트에서는 사용자 모집단의 일부만 선택해서 실험에 노출시키고,
A
그룹
을 모집단의 나머지 사용자 (대조군 )와 비교하여 ...