更新日:2026年8月16日
ABテストとは、2つ以上の案を同時に配信して同じ条件で比較し、成果の高いほうを採用する検証方法です。
「どちらが良いか」を議論ではなくデータで決めるための手法です。
ただしBtoBではCV数が少ないため、テストが成立しないことが多い点に注意が必要です。数十件の差を根拠に判断すると、偶然を実力と誤認します。
進め方
| 手順 | やること |
|---|---|
| ① 目的の指標を決める | CV率、クリック率など1つに絞る |
| ② 仮説を立てる | 「◯◯だから△△を変えれば改善する」 |
| ③ 変更点を1つに絞る | 複数変えると原因が分からない |
| ④ 同時に配信する | 期間をずらすと外部要因が混ざる |
| ⑤ 十分な期間・件数まで待つ | 途中で判断しない |
| ⑥ 結果を記録する | 採用した/しなかった理由も残す |
④の「同時に」が重要です。先週A案、今週B案という比較は、曜日や季節、他施策の影響が混ざります。
テストする箇所の優先順位
| 順 | 箇所 | 効果の大きさ |
|---|---|---|
| 1 | ファーストビューの見出し | 大 |
| 2 | CTAの文言 | 中〜大 |
| 3 | フォームの項目数 | 大 |
| 4 | CTAの位置・数 | 中 |
| 5 | メールの件名 | 中 |
| 6 | 画像・イラスト | 小〜中 |
| 7 | ボタンの色 | 小 |
ボタンの色から始めないでください。効果が小さく、差を検出するのに大量のデータが必要になります。
BtoBで成立しにくい理由
| 前提 | BtoCの例 | BtoBの例 |
|---|---|---|
| 月間セッション | 100,000 | 5,000 |
| CV率 | 2% | 1.5% |
| 月間CV数 | 2,000 | 75 |
| A/Bに分けると | 各1,000 | 各37〜38 |
| 判断 | 1〜2週間で可能 | 数か月かかる、または不可能 |
各群のCVが数十件では、偶然の差と本当の差を区別できません。BtoBサイトでABテストが機能するのは、流入が多く、CVも一定数あるページに限られます。
件数が足りないときの代替手段
| 手段 | 内容 | 適する場面 |
|---|---|---|
| 中間指標でテストする | CVではなくクリック率、フォーム到達率で比較 | 件数が多い指標がある |
| 前後比較する | 変更前後で同期間を比較 | 外部要因が少ない場合 |
| 定性調査に切り替える | ヒートマップ、ユーザーへのヒアリング | 数が取れない |
| 明らかな改善を優先する | テストせず、原則に沿って直す | 項目削減、エラー表示など |
| 大きく変える | 小さな差ではなく大きな差を作る | 検出しやすくなる |
「テストできないから何もしない」は誤りです。フォーム項目を10個から4個に減らすといった明らかな改善は、テストせずに実施して問題ありません。
判断を誤りやすい場面
| 場面 | 何が問題か | 対処 |
|---|---|---|
| 途中で有利なほうを見て打ち切る | 偶然の偏りを結果と誤認 | 事前に期間と件数を決める |
| 複数箇所を同時に変えた | 何が効いたか不明 | 1回1箇所 |
| 期間が短い | 曜日や時間帯の偏り | 最低1〜2週間、週単位で区切る |
| CV数が数十件 | 偶然の範囲 | 中間指標に切り替える |
| 流入元が偏っている | 広告経由だけで判断 | 流入元を揃えるか、分けて見る |
| 勝った案の理由を考えない | 次に活かせない | なぜ勝ったのか仮説を残す |
最も多いのは「途中で見て打ち切ること」です。開始直後は差が大きく出やすく、時間が経つと縮まります。
テストに向かない場面
- 明らかに直すべきもの:エラーで送信できない、スマートフォンで崩れている
- 件数が確保できないページ:月のCVが数件
- ブランドや方針に関わる判断:数字だけで決めるべきでない
- 長期の効果を狙うもの:短期のCVでは測れない
- 法令・規約に関わる表示:テストの対象にしない
結果を残す
| 記録項目 | 理由 |
|---|---|
| 実施期間 | 再現できるように |
| 対象ページ・対象者 | 条件の確認 |
| 仮説 | 何を検証したのか |
| 変更点 | A案とB案の差分 |
| 件数と結果 | 数値 |
| 採否と理由 | 次に活かすため |
| 気づいたこと | 次の仮説の材料 |
負けたテストの記録が最も価値があります。同じ案を数年後に別の担当者が試す、という無駄を防げます。
まとめ
- ABテストは同時に配信して同条件で比較する
- 変更点は1回に1箇所
- BtoBはCV数が少なくテストが成立しないことが多い
- 各群のCVが数十件では判断できない
- 件数が足りなければ中間指標や定性調査に切り替える
- 明らかな改善はテストせず実施してよい
- 途中で打ち切らない。事前に期間と件数を決める
よくある質問
ABテストにはどのくらいのCV数が必要ですか?
検出したい差の大きさによって変わりますが、各群で最低でも数百件は欲しいところです。小さな差(数%の改善)を検出するにはさらに多くの件数が必要になります。BtoBサイトでは月のCVが数十件ということも多く、その場合はCVではなくクリック率やフォーム到達率といった件数の多い中間指標でテストしてください。
テスト期間はどのくらいですか?
最低1〜2週間、かつ週単位で区切るのが基本です。曜日によって訪問者の傾向が変わるため、半端な日数だと偏りが出ます。ただし期間より件数が重要で、必要な件数に達していなければ延長してください。
途中で差が出たら止めてもよいですか?
止めないでください。開始直後は少ない件数のため差が大きく出やすく、件数が増えると縮まるのが一般的です。有利なほうを見て打ち切ると、偶然の偏りを結果として採用することになります。事前に期間と件数を決め、そこまで待ってください。
ABテストができない場合はどうすればよいですか?
原則に沿って直してください。フォームの項目を減らす、エラーをその場で表示する、CTAの文言を具体的にする、スマートフォンでの崩れを直す。これらは検証するまでもなく改善であり、テストせずに実施して問題ありません。テストが必要なのは、どちらが良いか原則からは判断できない場合に限られます。