ABテスト 有意差 計算ツール
表示回数とコンバージョン数を入れるだけで2案の統計的な優劣を即判定
ABテストで「どちらの案が本当に優れているのか、それともただの偶然なのか」を判断したいときに使う計算ツールです。パターンAとBの表示回数・コンバージョン数を入力するだけで、母比率の差のz検定によりp値と有意差の有無を即座に算出します。計算はすべてブラウザ内で完結し、データがサーバーへ送信されることはありません。マーケター、グロース担当者、PMが実験結果をすばやく確認したいときに便利です。
도구를 불러오는 중…
🔒 すべてブラウザ内で処理されます。アップロードしたファイルや入力内容がサーバーに送信されることはありません。
使い方
- 希望する信頼水準(90%・95%・99%のいずれか)を選びます。
- パターンA(コントロール)の表示回数とコンバージョン数を入力します。
- パターンB(バリエーション)の表示回数とコンバージョン数を入力します。
- 画面上部で有意差の有無、p値、各パターンのコンバージョン率と改善率(相対値)をそのまま確認します。
よくある質問
- p値が小さければ必ずBの勝ちということですか?
- いいえ。このツールは、Bのコンバージョン率がAを上回っており、かつp値が設定した信頼水準のしきい値を下回った場合にのみ「有意な勝ち」と判定します。BがAを下回っている場合は、p値が小さくても勝ちとは表示されません。
- 結果が「有意差なし」と出た場合はどうすればよいですか?
- サンプル数(表示回数)が足りないか、実際の差がそれほど大きくない可能性があります。テストを継続してデータを積み増したうえで、あらためて計算してみてください。
- 入力した数値はサーバーに保存されますか?
- いいえ。すべての計算はブラウザ内で即時に処理され、保存や送信は一切行われません。