광고 카피 A/B 테스트 기간 계산기 사용법
새로운 광고 카피를 테스트할 때 얼마나 오래 집행해야 신뢰할 수 있는 결과를 얻을지 미리 알면 예산과 일정을 효율적으로 관리할 수 있습니다. 이 계산기는 통계적으로 필요한 클릭 표본 수를 산출한 뒤, 일일 클릭 수로 나누어 최소 소요 기간을 계산합니다. 예를 들어 일일 클릭 300회, 기본 전환율 4%, MDE 15%, 신뢰도 95% 조건이면 필요 표본과 예상 기간이 자동으로 나와 캠페인 일정표에 바로 반영할 수 있습니다.
최소 감지 효과(MDE)는 의미 있다고 판단하는 최소 전환율 개선 폭입니다. MDE를 낮게 설정할수록 더 정밀한 차이를 감지해야 하므로 필요 클릭 수와 기간이 늘어납니다. 카피 테스트는 보통 큰 폭의 차이를 노리는 경우가 많아 MDE를 10~20% 수준으로 설정하는 것이 현실적입니다.
일 평균 클릭 수가 적은 광고는 기간이 길게 나올 수 있습니다. 이 경우 예산을 늘려 노출·클릭을 늘리거나 MDE를 높여 기간을 단축할 수 있으며, 결과의 신뢰성을 위해 계획된 기간을 지키는 것이 중요합니다. 실무에서는 최소 1~2주 이상 데이터를 쌓아 요일별 트래픽 편차를 고르게 반영하는 것이 권장됩니다.
자주 묻는 질문
측정 기준은 페이지 방문자 대신 광고 클릭 수를 사용합니다. 카피 A/B 테스트는 클릭률(CTR) 자체나 클릭 이후 전환율을 비교하는 데 활용되며, 소요 기간 계산 방식은 동일한 통계 원리를 따릅니다.
예산을 늘려 노출과 클릭을 늘리거나, MDE를 높여 필요 표본 수를 줄이는 방법이 있습니다. 그래도 기간이 너무 길면 신뢰도를 90%로 낮춰 검정력과 기간의 균형을 맞추는 것도 방법입니다.
권장하지 않습니다. 계산된 표본 수에 도달하기 전에 중간 수치만 보고 승자를 결정하면 우연에 의한 착시일 확률이 높아집니다. 반드시 목표 클릭 수와 최소 기간을 모두 채운 뒤 판단하세요.