A/Bテスト所要期間計算機の使い方
A/Bテストを始める前に、信頼できる結果を得るためにどれくらいの期間が必要かを把握しておくと、キャンペーンの計画がしやすくなります。この計算機は統計的に必要な標本数を算出し、それを1日の訪問者数で割って最低所要期間を計算します。
最小検出効果(MDE)は意味があると判断する最小の改善幅です。MDEを低く設定するほど、より精密な差を検出する必要があるため必要標本数と期間が増加します。
訪問者が少ないページは期間が長く出ることがあります。その場合はMDEを上げるか信頼度を下げて期間を短縮するか、結果を信頼するために計画した期間を守ることが重要です。
よくある質問
計算された期間より早くテストを終了してもいいですか?
推奨しません。目標標本数に達する前に中間結果だけを見て終了すると統計的な誤り(ピーキング問題)が発生し、誤った結論を導く可能性があります。
平日・週末のトラフィック差は考慮すべきですか?
はい。計算された期間が7日未満でも、曜日による偏りを減らすために最低1~2週間、最低1回の完全な週サイクルを含めて実施することをお勧めします。