<!here> A/B 테스트 결과 데이터 확인 시, 극단치(outlier) 제외 필터를 활용하실 수 있습니다.
극단치란 데이터 세트에서 비정상적으로 높거나 낮은 값을 말하는데요,
경우에 따라 극단치로 인해 결과가 왜곡되어 잘못된 의사결정을 내릴 위험이 있습니다.
일주일 평균 매출이 10만원인 커머스 서비스에서 고객 100명을 대상으로
평균 매출 증대를 위한 UI 개선 테스트를 진행한다고 가정해 볼게요,
고객을 50:50으로 균등하게 나누어 A안과 B안을 각각 노출하고 매출을 트래킹 합니다.
그런데 A그룹에 속한 한명의 고객이 해당 기간에 1,000만원 이상의 제품을 구매하여
A그룹의 평균 매출액이 B그룹보다 3배 이상 높게 나왔어요.
이 경우, A그룹의 평균 매출액은 극단치에 있는 한 고객에 의해 비정상적으로 높아진 것이므로,
데이터를 보이는 그대로 해석하게 되면 잘못된 의사결정을 내리게 될 수 있습니다.
핵클 극단치 제외 필터를 사용하여 클릭 한번으로 결과를 편리하게 검증하세요!
▶️극단치 자세히 보기:
https://docs-kr.hackle.io/v3.7.2/changelog/release-note-221111