AB Test란 무엇일까?

in 가이던스 on 데이터 기초

AB Test란 무엇일까?

이 포스팅은 3개의 목차로 구성되어 있습니다.

  1. AB Test의 정의
  2. AB Test의 대상이 되는 요소
  3. AB Test 프로세스


1. AB Test의 정의


AB Test란 온라인으로 접속한 사용자를 임의로 여러개의 그룹으로 분리하고
각 사용자 그룹에게 서로 다른 UI나 알고리즘을 노출시키고 비교함으로써
여러 안 중 가장 효과가 좋은 안을 찾아내는 것을 말한다.

쉽게말하자면, A안과 B안을 만들어 비교하고 더 나은 것을 찾는 방법이라 할 수 있다.

구글, 페이스북, 디스커버리와 같은 많은 유명기업들은
AB Test를 사용하여 페이지를 개선하고 목표를 달성한다고 한다.

2. AB Test의 대상이 되는 요소


AB Test의 대상이 되는 요소는 대표적으로 Headline Text와 CTA Text가 있다.

  • Headline Text
    • 페이지 방문자가 처음으로 읽게 될 문구
  • CTA Text ( Call-to-action )
    • 페이지 방문자에게 목표 행동을 유도할 문구
    • ex) 목표행동 : 회원가입, 구매, 사이트 방문

3. AB Test 프로세스


AB Test는 크게 6가지 프로세스를 통해 수행된다.

  1. 데이터 수집
    • 전환율이 낮은 트래픽 구역 찾고 , 데이터 수집
  2. 목표 설정
    • ex) 버튼 클릭, 구매링크 클릭, 회원 가입
  3. 가설 수립
    • 현재(기존) 버전보다 나을 것 같은 아이디어를 기준으로 가설 수립
  4. 비교 버전 만들기
    • AB Test 소프트웨어 이용하여 비교 버전 만들기
    • ex) CTA 버튼 색깔 변경, 문구 변경
  5. 실험 수행
    • 페이지 방문자들에게 랜덤으로 페이지 배정 (A or B) 하여 테스트
  6. 결과 분석
    • 두 버전의 퍼포먼스 비교
    • 이 분석 결과가 통계적으로 유의미한지
    • 일반적으로 P-value, AA Test를 통해 통계적 유의미성 확인함

© 2024. All rights reserved.