
📌 A/B 테스트 완전 정복 시리즈 | 6편 / 25편
Part 2. 조직 원칙 — "조직이 갖춰야 할 것"
A/B 테스트의 세 번째 원칙입니다:
조직은 대부분의 아이디어가 실패한다는 것을 인정한다.
실제 기업들의 A/B 테스트 성공률을 보면 놀랍습니다:
| 기업 | 성공률 |
|---|---|
| Netflix | 약 10% (담당자 스스로도 90%는 실패라고 인정) |
| Slack | 수익화 실험의 약 30%만 성공 |
| 일반 온라인 기업 | 10~30% 수준 |
즉, 마이크로소프트, 구글, 아마존 같은 세계 최고 기업들도 아이디어 10개 중 7~9개는 버립니다.
답은 간단합니다:
실패한 실험에서 배운 인사이트가, 다음 성공을 만든다.
A/B 테스트는 "성공 vs 실패" 게임이 아닙니다. 매 실험에서 "고객이 진짜 원하는 게 뭔지"를 조금씩 알아가는 과정이에요.
| 원칙 | 핵심 |
|---|---|
| 1. OEC 공식화 | 실험 목표를 숫자로 정의하라 |
| 2. 인프라 투자 | 실험할 환경을 만들어라 |
| 3. 실패 수용 | 대부분 실패한다, 그래도 계속 하라 |
이제 원칙은 알았습니다. 본격적으로 A/B 테스트를 설계하려면 통계를 알아야 해요.
다음 편부터는 실험의 기초가 되는 통계 개념을 하나씩 쉽게 풀어봅니다.