A/B 테스트에 '실제 사이트에서 미리보기'와 '판정까지 남은 방문자 수' 안내 추가
- ab-testing
- preview
A/B 테스트에 두 가지 기능을 추가했습니다. **'실제 사이트에서 미리보기'**로 공개 전 모습을 실제 사이트에서 확인할 수 있게 되었고, 결과 화면에는 '판정까지 남은 방문자 수' 안내가 표시됩니다.
실제 사이트에서 미리보기
지금까지의 생성 화면 미리보기에 더해, 고객님의 사이트 자체에서 패턴을 확인할 수 있게 되었습니다.
실험 상세 화면에 '실제 사이트에서 미리보기' 항목이 추가되어, 패턴별로 '미리보기 URL 복사' 버튼이 나란히 표시됩니다. 복사한 URL을 브라우저에서 열면 해당 패턴의 변경 사항이 적용된 페이지가 표시됩니다.
- 초안·일시정지 중인 실험도 확인할 수 있습니다. 시작 전에 문구가 잘 들어가는지, 레이아웃이 깨지지 않는지 실제 페이지에서 확인할 수 있습니다.
- 미리보기 중에는 계측이 전혀 이루어지지 않습니다. 노출 수·성과·히트맵 어디에도 기록되지 않으므로, 몇 번을 열어봐도 결과에 영향을 주지 않습니다.
- 리다이렉트 테스트에도 대응합니다. 분기 대상 페이지로 이동한 상태로 미리보기가 표시됩니다.
- URL을 팀원이나 제작사에 보내면 동일한 화면을 공유할 수 있습니다.
미리보기가 적용되는 것은 URL을 연 첫 페이지뿐입니다. 사이트 내 다른 페이지로 이동하면 일반 화면으로 돌아갑니다.
판정까지 남은 방문자 수 안내
결과 화면 상단에 다음과 같은 안내가 표시됩니다.
승자 판정의 최소 기준까지 약 160명의 방문자가 더 필요합니다 (현재 속도라면 약 4일)
- 방문자 수는 각 패턴이 판정의 최소 기준(패턴별 100명)에 도달하기까지 부족한 인원의 합계입니다.
- 일수는 테스트 시작 이후의 실제 방문 속도를 바탕으로, 가장 느린 패턴이 최소 기준에 도달하기까지 걸리는 일수를 산출합니다. 배포 비율을 한쪽으로 치우치게 설정한 경우에도 지나치게 짧게 추정되지 않습니다.
- 일수는 시작 후 하루가 지나고 방문이 발생한 시점부터 표시됩니다. 그 전까지는 방문자 수만 표시됩니다.
- 모든 패턴이 최소 기준에 도달하면 이 안내는 사라지고, 지금까지와 같이 승자 후보 표시로 전환됩니다.
최소 기준은 판정을 시작할 수 있는 하한선입니다. 패턴 간 차이가 작을 경우 더 많은 방문이 필요할 수 있습니다.
이 기능이 공개되기 전부터 진행 중이던 테스트는 시작 일시 기록이 없어, 일수는 표시되지 않고 방문자 수만 표시됩니다.
요금제
두 기능 모두 무료 플랜을 포함한 모든 플랜에서 이용하실 수 있습니다.
영향 범위
기존 측정 태그를 그대로 사용합니다. 사이트 측 설정 변경은 필요하지 않습니다. 측정 태그(tracker.js)는 브라우저에 최대 24시간 캐시되므로, 공개 직후에는 일부 환경에서 '실제 사이트에서 미리보기'의 반영이 다음 날이 될 수 있습니다.