3편. Netflix·Amazon·Airbnb는 A/B 테스트를 이렇게 합니다

📌 A/B 테스트 완전 정복 시리즈 | 3편 / 25편
Part 1. 입문 — "왜 해야 하는가"

들어가며

이론은 알겠는데, 실제로 어떻게 쓰이는 걸까요?

이번 편에서는 세계적인 기업들의 A/B 테스트 사례를 통해, 어떤 고민을 하고 어떤 결정을 내렸는지 살펴봅니다.
.
.
.
.
.

사례 1. Netflix — 버튼 문구 하나로 결제를 유도하다

Netflix는 가입 페이지의 CTA(Call To Action) 버튼 문구를 바꾸는 실험을 했습니다.

핵심 고민은 이것이었어요:

"결제를 유도한다는 느낌 없이, 심리적 허들을 최대한 낮추면서, 사용자가 스스로 궁금해서 결제 페이지로 넘어가게 할 수 있을까?"

여러 문구를 테스트한 끝에, 가장 성과가 좋은 CTA 버튼을 채택했습니다.

교훈: 텍스트 한 줄의 차이도 전환율에 큰 영향을 줄 수 있다.
.
.
.
.
.

사례 2. Amazon — 여백이 매출을 바꾸다

Amazon은 상품 페이지의 레이아웃을 실험했습니다:

• A안: 화면 전체를 꽉 채우는 Full-width 레이아웃
• B안: 양쪽에 여백이 있는 레이아웃

2020년, 모바일 쇼핑 고객이 급증하면서 "Web 고객 경험도 모바일처럼 개선할 수 없을까?"라는 고민에서 출발했죠.

결과는? 여백이 있는 B안이 승리. 여백이 콘텐츠 집중도를 높여서, 사용자가 상품 정보에 더 몰입하게 만들었습니다.

교훈: "더 많이 보여주는 것"이 항상 좋은 건 아니다.

.
.
.
.
.

사례 3. Airbnb — "좋은 의도"가 항상 좋은 결과는 아니다

Airbnb는 예약률을 높이기 위해 이런 실험을 했습니다:

"예약 가능한 빠른 날짜를 미리 보여주면, 예약이 더 쉬워지지 않을까?"

• A안: 기존 날짜 선택 화면
• B안: 예약 가능한 가장 빠른 날짜를 자동 제안

1차 실험 결과 (2020년 8월): B안이 오히려 예약률을 떨어뜨렸습니다.

5개월 뒤, UI를 개선해서 다시 시도했지만 2차 실험 (2021년 1월)에서도 B안이 패배.

왜 그랬을까요?

Airbnb가 얻은 교훈은 이것이었습니다:

정보를 더 많이 제공하는 것이 항상 좋은 UX는 아니다. 사용자의 기존 행동 패턴을 존중하는 것이 더 중요할 수 있다.

이 사례는 "넛지(Nudge)" — 사용자를 부드럽게 유도하는 전략이 항상 통하지는 않는다는 걸 보여줍니다.
.
.
.
.
.

세 사례에서 얻는 공통 교훈

그리고 가장 중요한 한 가지:

실험의 독립성을 유지해야 한다. 배경 이미지, 레이아웃, 텍스트를 동시에 바꾸면 "뭐 때문에 좋아졌는지" 알 수 없다.

다음 편 예고

기업 사례를 보니 A/B 테스트가 어떻게 쓰이는지 감이 오시죠?

다음 편부터는 성공적인 A/B 테스트를 위해 조직이 갖춰야 할 3가지 원칙을 알아봅니다.