見出し画像

ABテストのやり方|初心者でも回せる5ステップで、Webマーケティングの売上アップを設計する

ABテストのやり方を調べると、「仮説を立てて、AとBを配信して、有意差が出たら勝ち」——だいたいそんな説明が出てきます。手順としては、間違っていません。ただ、現場で20年近くABテストを回し、今も毎月20件以上のテストを見ている立場から言うと、初めての1本で結果を分けるのは手順の丁寧さではありません。始める前の「どこで・何を・どう判定するか」の設計です。ここを外すと——売上に効かない場所で、効きの小さい要素を変えて、間違った数字で勝ち負けを決めることになる。それでは、正しい手順で回しても勝てないし、負けても学びが残りません。

この記事では、初めてABテストに取り組むあなたに向けて、現場で使っている型を5つのステップに落として解説します。読み終わったとき、自分のサイトで最初の1本を設計できる状態になっているはずです。

この媒体が何者かは、こちらをどうぞ。 https://note.com/abtest_shoritsu/n/n4042b05d8859


ABテストとは?——「当てるもの」ではありません

AとBの2案とは限らない。勝率は"設計"できる。

ABテストとは、ページの一部(ボタンの文言、画像、コンテンツなど)を変えた複数のパターンを、訪問者にランダムに出し分けて、どちらが成果につながるかを数字で決める方法です。

初心者のうちに、3つだけ押さえてください。

1つ目。「AとBの2案」とは限りません。慣れた現場では、1回のテストで5パターン、10パターンを同時に走らせます。理由はシンプルで、テストの成否は「今のページを上回る案が、パターンの中に1つでも入っているか」で決まるからです。上回る案が入っていなければ、どれだけ丁寧に回しても、結果は出ません。だから、その1案を引き当てるために、パターンはできるだけ幅広く・多く出す。これが成功の近道です。

2つ目。「勝つ」の意味。ABテストの「勝ち」とは、今のページ(現状パターン。チャンピオンと呼びます)より高い成果が出ることです。そして負け=現状維持であって、損ではありません。「この変更は効かない」とデータで分かること自体が、次の一手の材料になります。

3つ目。ABテストは「当てるもの」ではありません。センスの良い案を思いついて一発当てるゲームではなく、勝率を設計して、コツコツ積み上げる仕事です。業界でよく言われる成功率は「4打数1安打」=25%程度。でも、これから書く「どこで・何を・どう仕込むか」を押さえると、勝率は5割を超えてきます。私はこれを勝率設計と呼んでいます。

WebサイトのABテスト——勝敗の8割は「どこで・何を」で決まる

バケツの穴は、いちばん下から塞ぐ。

どこでテストするか:CVに近いページから

最初に迷うのが「どのページをテストするか」。答えはシンプルで、CV(コンバージョン=購入・申込などのゴール)にいちばん近いページからです。ECならカート、LPや申込型のサイトなら入力フォームの手前。

バケツを思い浮かべてください。集客を増やすのは、バケツに注ぐ水を増やすこと。でも、バケツの下の方に穴が空いていたら、いくら注いでも水は貯まりません。CVに近いページの離脱は、いちばん下の穴です。ここを塞ぐのが先。下流の改善は、そのまま売上に直結します。

例えば、ある来店予約型のサービスでは、申込フォームの項目名「第1希望エリア」を「希望エリア」に和らげただけで、フォームの完了が約1.5倍になりました。トップページの派手な改修ではなく、CVのすぐ手前の一語。下流は、それくらい効きます。

何を変えるか:CTAボタンの文言→キービジュアル→コンテンツの順

次に「何を変えるか」。優先順位は、①CTA ②キービジュアル ③その間のコンテンツ、の順です。

CTAとは、CVへ進むボタンや導線のこと(「カートに入れる」「予約する」など)。なぜCTAが最優先か。CVする人は、100%の確率でCTAを通るからです。ページのどこを読むかは人それぞれでも、CTAだけは全員が通る。だから、ここの改善はテストした全員に効きます。迷ったら、CTAの文言から始めてください。色から入らないこと——理由は後半の「罠」で書きます。

ABテストのやり方:5ステップ

ページとCVを決め、2週間回し、"揃い"で判定する。

ステップ1|ページとCVを決める

テストするページと、成果を測るCVを決めます。ページは先ほどの通りCVに近い下流から。目安として、月に数千〜1万訪問くらいあるページを選びます(少なすぎると、いつまでも決着がつきません)。

このとき、最終CV(購入・申込)だけでなく、その手前の行動——ボタンのクリック、カート到達、入力開始——も一緒に測る設定にしておきます。これをマイクロCV(中間のコンバージョン)と呼びます。あとで効いてきます。

ステップ2|パターンを作る——サンプルサイズは1パターン訪問200・CV30

現状のチャンピオンに対して、挑戦者のパターンを作ります。最初は現状+2〜4案くらいから。パターン数の目安は、1パターンあたり訪問200・CV30を、テスト期間中に確保できる範囲に絞ることです。

そして1つ、必ず入れてほしいのが捨て案です。「これは絶対ないな」と思う極端な案を、あえて1つ混ぜる。理由は2つ。その「絶対ない」が思い込みで、実は勝つことがあるから。そして本当に駄目でも、良い案との差がくっきり見えて、何が効いているのかの基準線になるからです。

ステップ3|ツールを決めて回す——テスト期間は最低2週間

配信期間は最低2週間。平日と週末で訪問者の顔ぶれが変わるので、曜日のサイクルを2周させて、特定の曜日の影響をならします。1週間でやめない。これだけで判定の精度がかなり変わります。

回す手段は、専用のテストツールを使うのが確実です(出し分けと集計を自動でやってくれます)。始める前に、現状ページのスクリーンショットを必ず撮っておくこと。あとで「何と比べて勝ったのか」を説明できなくなるのを防ぎます。

ステップ4|有意差を判定する——改善信頼度90%が目安

ツールが出す「改善信頼度」(そのパターンが本当に勝っている確からしさ。統計で言う「有意差」にあたるものです)を見ます。目安は90%以上。スピード重視の現場では85%で捌くこともありますが、その場合は手前のマイクロCVでも同じパターンが勝っていることを条件にします。

大事なのは、1つの数字だけで判定しないこと。最終CVが伸びていて、手前のマイクロCVも同じ方向に動いている——この揃い方を確認して、初めて「勝ち」です。クリックだけが伸びているパターンを勝ちにしてはいけません(これも「罠」で後述します)。

ステップ5|反映して、次を打つ

勝ちパターンを本番に反映したら、翌月の月間CV・売上がどう動いたかまで確認します。テスト単体の勝ち(木)と、事業の数字(森)。両方見て、初めて「効いた」と言えます。

そして、1回で終わらせない。1本のテストの改善幅は小さくても、毎月積み上げると複利で効いてきます。実際、ある実店舗も展開するECサイトでは、毎月コツコツとテストを積み上げた結果、流入が約1.9倍に伸びる間に、注文は約2.3倍になりました。流入の伸びを超えてCVが伸びる——これが、サイトの中身が良くなったという証拠です。

「ABテストは意味ない」になる3つの罠——初心者がつまずくポイント

クリックで喜ばない・1週間でやめない・1回で満足しない。

罠1:色・デザインから変えて、クリックだけが増える

あるECサイトの一覧ページで、ボタンを目立つ赤に変えたテストがあります。クリックは34%増、改善信頼度100%の圧勝。ところが、購入はほぼ動きませんでした(+0.07%)。

色が動かすのは「気づくか・押すか」であって、「買うか」ではないからです。買う・買わないを決めるのは、色より言葉。だから優先順位は文言が先、色は最後。そして判定は、必ず最終CVとセットで行ってください。

罠2:1週間でやめる

平日はじっくり比較する人、週末は勢いで買う人——曜日で客層は変わります。3日や1週間の数字で判断すると、たまたまの偏りを「勝ち」と誤読します。曜日を2周、最低2週間。待つのも設計のうちです。

罠3:1回勝って満足する

理由は2つあります。まず、1回目の勝者は「あなたが出した案の中の1位」にすぎません。特に、有意差が出たエリアは、お客様がそれだけ反応する重要な場所だという証拠です。そこで1回勝って終えるのは、金脈を一掘りでやめるようなもの。価値のあるエリアほど、パターンを足して掘り続けてください。真のチャンピオンは、2巡目・3巡目で見つかることが多いのです。

もう一つ、勝ちには寿命があります。ページは少しずつ変わり続け、訪れるお客様も、競合も変わる。去年の勝ちパターンが、今年は負けることが普通にあります。そして何もしなければ、CVRは放っておくと少しずつ下がっていく。ABテストは1回のイベントではなく、毎月回し続ける習慣です。積み上げた者だけが、複利を取れます。

ABテストの勝率は「設計」で上げられる——3つの仕込み

マイクロCV・セグメント・パターン数の"後出しジャンケン"。

最後に、同じテストでも勝率が変わる仕込みを3つ。すべて、テストを始める前に「取っておくだけ・設定しておくだけ」のものです。

  1. マイクロCVを最初から計測しておく。最終CVで差が出なくても、手前のマイクロCVで判定できることが多い。

  2. セグメントを最低3つ仕込んでおく。新規/既存(ログインの有無で代用できます)、デバイス、流入元など。全体で引き分けでも、特定のセグメントでは大きく勝っていることがあり、そこだけ出し分ければ勝ちを拾えます。

  3. パターン数を増やす。トラフィックが許す範囲で、幅広く。

私はこの仕込みを「後出しジャンケン」と呼んでいます。テストが終わってから、勝てる場所を探しに行ける。ずるいようですが、事前に仕込んだ人だけが使える、正当な設計です。

ABテストのやり方Q&A——よくある質問

無料でできる? 統計は要る? 広告との違いは?

Q. 無料でもできますか? 計測(GA4)を無料で整えるところまでは、できます。ただ、肝心のパターンの出し分け——複数のマイクロCVを取り、セグメント別に結果を見る——まで無料でまかなうのは、いまは正直むずかしい状況です(定番だった無料ツールは提供を終了しました)。本気で回すなら、有料の専用ツールを前提に考えてください。ツールが何であれ、この記事の5ステップ(設計)はそのまま使えます。

Q. 統計の知識は必要ですか? ほぼ不要です。有意差の計算は、ツールが「改善信頼度」として出してくれます。あなたが持つべきは「90%を目安に、最終CVとマイクロCVの揃いで判定する」という判断の型だけです。

Q. YouTubeのサムネイルや、インスタ・Meta広告のABテストも同じですか? 「複数の案を出して、数字で決める」という考え方は同じですが、土俵が違います。Webサイトは自分の土俵。どのCVで判定するか、パターン数、期間、セグメントまで、すべて自分で設計できます。一方、広告やSNSはプラットフォームの土俵です。配信はアルゴリズムが握り、評価もクリック率やCPAといった“手前の指標”が中心になる。「最終CVで判定する」というこの記事の型がそのまま効くのは、Webサイトです。広告・SNSの回し方は、別の記事で扱います。

Q. ABテストに使える無料のツールはありますか?

A. 無料や低価格のツールもありますが、選定はサイトの規模と実装体制で変わります。ツールより先に、どこで何をテストするかの設計を固めるほうが成果に直結します。

Q. ABテストの費用はいくらですか?

A. ツール費は無料から月数十万円まで幅があります。費用対効果は、テスト1本が動かす月間売上を試算すると判断しやすくなります。対象ページの訪問者数×CVR改善幅×客単価が目安です。

まとめ:ABテストのやり方=5ステップ+3つの仕込み

まずCV直前のページで、CTAの文言を3案から。
  • テストは「当てるもの」ではなく設計。通説の勝率25%は、設計で5割を超えられる

  • 場所はCVに近い下流から(バケツの穴は下から塞ぐ)

  • 変えるのはCTAの文言から(全員が通る場所が、いちばん効く)

  • 1パターンあたり訪問200・CV30、期間は最低2週間

  • 判定は改善信頼度90%目安+マイクロCVの揃いで。クリックだけで喜ばない

  • 捨て案を混ぜる、セグメントを仕込む、毎月続けて複利にする

まずは、あなたのサイトのCVにいちばん近いページで、CTAの文言を3案。ここから始めてみてください。


この記事があなたの現場の役に立ったら、スキを押してもらえると執筆の励みになります(noteアカウントが無くても押せます)。次に何を書くかの参考にしています。

なお、この手順を1本ずつ回すための型は、ABテスト指示書(実施前2項目・実施後2項目を埋めるだけ)にしてあります。『ABテスト勝率設計の実務キット』の購入特典として、そのままお渡ししています。いま購入すると、今後の増補も追加料金なしで読めます。

▼ABテスト勝率設計の実務キット(第1部まで無料で読めます)


【無料特典】ABテストが初めてでも、大丈夫
無料メルマガにご登録いただいた方に、「あなたのWebサイトの改善ポテンシャル診断」(10項目・1枚)をお渡ししています。✓を付けていくだけで、広告を増やさずに売上を伸ばせる“伸びしろ”と、最初の一歩が見えてきます。メルマガでは、記事にしづらい失敗談や現場の裏側も配信中です。 ▼無料メルマガに登録して、診断を受け取る https://abtestshoritsu.substack.com

顧客体験を変え、売上を変え、人生を変える——次の一手は、あなたのサイトの中にあります。

いいなと思ったら応援しよう!