A/B 테스트
A/B 중 고객이 선호하는 페이지가 무엇인지 테스트
유명한 사례로 오바마의 대선캠프 사이트가 있다.
빠른 프로토 타입에 대한 검증과 최적의 개선안을 찾기 위한 실험
- 상황 : 문제점을 알지만 개선안을 모른다, 최적의 개선안을 위한 오랜 분석 필요, 어떤 최적안이 최고인지 모른다, 감으로는 알겠지만 수치로 증명을 못한다.
- A/B Test : 여러 대안을 비교해 최적안을 찾는다, 빠른 실험으로 검증, 수치로 검증
분석 방법 예시
- 방문자 분석 : 순 방문자 수 / 재방문자 수
- 페이지 트래픽 분석 : 기존 평균성과 비교 / 시간대 분석 / 과거 동일기간과 비교
- 마케팅 채널 분석 : 방문률이 높은 마케팅 채널 분석 / 검색엔진 별 검색어 상세 분석 / 마케팅 전후 비교 추이 분석
- 네비게이션 분석(이동 경로) : 고객들의 페이지 이동성향 분석 / 메뉴 별 이동성향 파악
- 페이지 상세 분석 : 많이 조회된 페이지 분석 주요 시작 페이지 파악
- 세분화 분석 : 회원, 비회원분석 / 인구통계학 / 로그인 횟수
- 전환 시나리오 분석 : 이벤트 기획 의도에 맞는 방문객 이동ㅇ성 파악 / 성취율 분석 및 단계별 이탈율 분석
테스트 대상
테스트 사례 및 실험 전 확인사항
- 장바구니 버튼으로 구매 전환 용이하게 변경
GA로 데이터 수집 - 제품 목록에 '장바구니' 버튼을 포함 - 수익과 목표 전환 향상
- 롯데호텔 : 방문 규모 확대나 매출이 기대에 못 미침
- 사이트 레이아웃 및 클릭 유도 문안을 다변수 테스트로 개선
GA로 데이터 수집 및 경쟁사 비교 분석 - 다변수 테스트 - 수익과 목표 전환 향상
실험 계획
순서
데이터 분석 - 가설 설정 - 대안 생성 - 테스트 진행 - 런칭
- 좋은 실험을 위한 고려 사항 : 고객 여정 중 어디부터 실험, 어느 부분을 실험, 언제 멈출 것인가.
- 실험 시나리오 설정이 우선 되어야 한다.
구글 옵티마이즈
개요 : 개발자 도움 없이도 웹 페이지 변형, 실험하여 최적안을 찾는 도구
웹사이트의 UI 테스트 및 변형,실험이 가능한 툴
- Conversion Rate Optimization(CRO) : 원하는 작업을 하는 웹 방문자의 비율을 높이는 프로세스
GA로 데이터 수집, 분석 - Optimize로 A/B테스트 통한 UI/UX최적화 - GA로 성과측정
특징
- 인사이트 : GA와 같은 데이터 소스 사용, 개선요소 빠르게 파악하고 테스트 기획
- 최적화 : 맞춤 설정을 통해 고객에게 최적안 제공
- 쉬운 테스트 : 기술팀 없이 간단한 테스트 가능
- 손쉬운 설정 : 한 줄의 코드만으로 설치 가능, 실험 설정 간편하게 가능, 설치 후 바로 테스트 가능
무료, 유료 버전 차이점
- 잠재고객 타겟팅 : 불가 / 가능
- 대상 : 중소 규모, 대규모
- 다변수 테스트 : 16/32개
- 실험 목표 : 3 / 10개(추가 가능)
- 동시 실험 : 5 / 100개 이상
- 관리 : 기본 / Google Marketing Platform 관리
- 지원 및 서비스 : 셀프 서비스, 커뮤니티 / 엔터프라이즈급 서비스, 지원 및 SLA
- 결제 옵션 : 무료 / 메일 인보이스
기능 및 실험 유형
- 비주얼 편집기 : 쉬운 편집, 간단한 진단, 미리보기 제공, 코드 편집 가능
- 통합 : GA를 사용, Ads, BigQuery, Firebase와도 연계
- 쉽고 직관적 테스트 생성
- 손쉬운 설치
- 실험 유형 : A/B테스트, 다변수 테스트, 리디렉션 테스트, 맞춤 설정
- 실험 목표 : 시스템 목표, GA 목표, 사용자 지정 목표, 업그레이드 된 실험 목표
- 타겟팅 : 고급 클라잉언트 측 신호, GA 잠재고객, URL, 사용자 속성
테스트
- 리디렉션 테스트 : 서로 다른 웹 페이지 테스트, 페이지의 요소 대신 URL 또는 경로로 변형을 식별
전혀 다른 페이지나 디자인을 완전히 변경할 때는 리디렉션이 유용
- 다변수 테스트 : 두개 이상의 요소의 변형을 동시에 테스트. 변형 간의 상호작용을 분석
- 맞춤화 설정 : 다양한 타겟팅을 통해 개인화된 컨텐츠를 사용자에게 제공
실습
1) A/B 테스트
원하는 웹 페이지를 입력하고 테스트 선택해서 만들기
변경 후에 목표 설정하고, GA 속성과 연결한 뒤에 시작
2) 다변수 테스트
대안 페이지에서 변경을 한 뒤에 여러 조합에 대한 테스트가 가능하다.
3) 리디렉션 테스트
새로운 테스트로 이동시키는 테스트
원본페이지와 대안
- 대안 페이지를 설정
- 변이 추가 가능
- 고급 설정에서 여러 조건식을 적용할 수도 있다.
4) 맞춤 설정
- 대안이 아니라 바로 페이지를 편집
- 목표 없음
- 변경사항을 바로 노출
- 페이지 추가 가능
테스트들은 보고를 통해 GA에 세그먼트 생성, 종료 및 배포가 가능하다.