A/Bテスト サンプルサイズ計算ツール

CVRと期待する改善率から各バージョンの必要サンプルと日数の目安を算出します(有意性95%・検出力80%を標準)。

%
コンバージョンユーザー数/対象ユーザー数。過去データの概算でOK
%
目安:5%は控えめ / 10%は標準 / 15%はやや強気 / 20%は強気
例:CVR 1.5% → 1.65%(相対 +10%)
対象ページ or 対象ユーザー
この推定は近似計算です。極端に低/高い成約率や厳密検定が必要な場合は専門手法をご検討ください。

結果

必要サンプル(各バージョン)
-
合計(A+B)
-
前提:—
v2.1.6

標準設定:有意性95%(α=0.05)・検出力80%・検定 両側・配分 1:1

有意性 95%(α=0.05, significance level):偶然で差が出るのを5%まで許す設定。両側検定では左右2.5%ずつ。

検出力(power) 80%:本当に差があるときに有意差が出る確率。