18편. 검색 모듈 위치 실험 — 원페이저 작성하기
📌 A/B 테스트 완전 정복 시리즈 | 18편 / 25편
Part 7. 실전 케이스 — "실제로 해보자"
들어가며
샹숑배달의 첫 번째 실험입니다.
메인 홈의 검색 모듈이 하단에 있는데, 이걸 상단으로 올리면 어떨까?
원페이저를 작성해봅시다.
배경
- 검색을 이용하지 않는 비율: 약 70%
- 검색을 이용한 고객의 구매 전환율: 40% (비검색 고객 25% 대비 높음)
- 검색 기능 자체는 효과적이지만, 위치 때문에 활용되지 못하고 있다는 가설
원페이저
| 항목 | 내용 |
|---|---|
| 타겟 유저 | 메인 홈 방문 고객 |
| 관찰 현상 | 검색 이용률 30%로 낮음. 검색 사용자의 전환율은 비사용자보다 15%p 높음 |
| 문제 정의 | 검색 모듈이 하단에 있어 발견되지 못하고 있음 |
| 가설 (H₁) | 검색 탭을 상단 배치하면 검색 이용률이 올라갈 것이다 |
| 가설 (H₂) | 검색을 통한 구매 전환율이 증가할 것이다 |
| 실험 그룹 | A = 하단 검색 유지, B = 상단으로 이동 |
| 인풋 메트릭 | 메인 홈 UV, 검색 탭 클릭 UV |
| 아웃풋 메트릭 | 구매 전환율, ARPU, 검색 이용률 |
| MDE | 2% |
| 최소 샘플 | 약 92,000명 (최소 4일 수집) |
| 트레이드오프 | 기존 탐색 패턴 변화 가능, 홈 카테고리 이용 감소 가능성 |
| 중단 기준 | 전환율 및 매출이 3일 연속 유의미하게 하락 시 |
다음 편 예고
원페이저를 작성했으니, 실험을 돌려봅시다.
다음 편에서는 이 실험의 결과 분석을 진행합니다.
Data Analyst | Thoughts Become Things. 할 수 있다고 생각하면 할 수 있다. 할 수 없다고 생각하면 할 수 없다. | www.linkedin.com/in/명수-제-7ab843200