A/Bテストとは?2つの案を実データで比べて選ぶ検証

「どっちのデザインがいいか」で意見が割れたとき

ボタンは赤がいいか、緑がいいか。メールの件名はどっちが開かれるか。社内で意見が割れて、結局「なんとなく」で決めてしまう。そんなときに役立つのがA/Bテストです。

A/Bテストとは?ひとことで言うと

A/Bテストは、A案とB案の2つを実際に出し分けて、どちらが良い結果だったかを実データで比べる検証方法です。やさしく言うと「2つの案を同時に試して、お客さんの反応で勝ち負けを決める」やり方です。勘や好みではなく、実際の数字で判断できるのが特長です。

EC現場ではどこで使う?

メールの件名、購入ボタンの色や文言(CTA=行動をうながすボタンや言葉)、商品ページの写真やキャッチコピー、バナーの2案比較など、「どっちが反応が良いか」を確かめたいあらゆる場面で使います。広告のクリエイティブ比較や、ランディングページの改善でも定番の手法です。

具体例で見る

メルマガの件名を2案つくり、配信リストを半分に分けて、Aを5000人、Bを5000人に送ったとします。結果、Aの開封率が18%、Bが24%だったなら、Bのほうが開かれやすい件名だと分かります。次回からBの方向で件名を作れば、開封率を底上げできます。ボタンの色を変えてCVR(購入率)を比べる、といった使い方も同じ要領です。

同じレイアウトのページがA案とB案として左右に並び、それぞれの反応の大きさを比べている様子で、A/Bテストの考え方を表したイラスト
A/Bテストは「2つの案を同時に出して、反応を実データで比べる」こと。勝った方を採用すれば、勘に頼らず改善できる。

なぜ大事なのか・知らないとどう困る?

A/Bテストをしないと、改善が「好み」や「声の大きい人の意見」で決まってしまい、本当に効果があったのか分からないまま進みます。A/Bテストなら、お客さんの反応という事実で判断できるので、改善の積み重ねが効いてきます。やってみないと分からないことを、低リスクで確かめられるのが強みです。

よくある勘違い

差が小さいときや、試した人数が少ないときは、結果を「勝ち負け」と決めつけないことが大切です。たまたまの偏りで差が出ることもあるからです。また、一度に複数の要素(色も文言も写真も)を同時に変えると、どれが効いたのか分からなくなります。基本は「一度に変えるのは1要素だけ」です。

つまり現場では?

A/Bテストをするということは、「迷ったら、お客さんに聞いてみる」ことを数字でやる、ということ。意見で決めずに、実際の反応で決めるための仕組みです。

明日やるならこれ

次のメルマガで、件名を2案つくって配信リストを半分ずつに分け、開封率を比べてみましょう。1要素だけ変える小さなテストから始めれば、結果も読み取りやすくなります。

ひとことで言うと

A/Bテストとは、2案を実データで比べて選ぶ検証で、勘ではなく数字で改善できます。