TIL
- 퍼널 분석
- A/A 테스트
- 지표의 종류
- 민감도와 강건성
퍼널 분석(Funnel Analysis)
- 특정 목표를 이루기 위해 필요한 이벤트를 단계적으로 나누어 분석하는 것
- 웹 사이트에 유입된 사용자가 '전환(Conversion)'에 이르기까지의 여정을 흐름대로 시각화하여 어떤 단계에서 가장 많이 이탈하는지를 알아보기 위한 방법
- 퍼널 분석을 통해 이탈률이 가장 높은 구간을 찾고, 해당 구간의 이탈률을 평가지표로 삼는다.
A/A testing
- 아무런 변화도 주지 않고 두 집단의 차이를 측정하는 실험
- 외부 변인의 영향을 제대로 통제했다면, 양쪽 집단에서 결과가 똑같이 나와야 함
- A/A testing에는 주로 불변 지표를 사용함. 불변 지표란 실험 과정에서 변하면 안 되는 변수를 의미함
- 예를 들어 실험/대조군의 샘플 수를 계산했을 때 오차 범위 이내를 유지해야 함
지표의 종류
- 합계 지표 - 웹사이트에 유입된 사용자 수
- 기술통계지표 - 구매까지 걸리는 평균 시간, 첫 구매가 발생할 때까지 방문한 페이지 수의 중위값
- 확률 - 어떤 이벤트가 발생한 경우 1, 아닌 경우 0을 부여하여 발생 확률을 지표화
- 비율 - 분모에 대한 분자의 비율, <결제하기를 누른 횟수 / 구매 완료한 횟수>
지표를 선정할 때 고려할 점
- 민감도 : 원는 변화가 발생했을 때 그 변화에 비례해서 움직이는 지표를 민감하다고 함
- 강건성 : 목표와 상관없는 변화가 일어났을 때 지표가 움직이지 않으면 강건하다고 함
-