小さなお店のA/Bテスト：どのキャンペーンが効果的？
毎週テストなしで間違ったキャンペーンにお金を捨てている — 5分で設定完了、100顧客まで無料。
2つのキャンペーンのうち、どちらがより多くの顧客を呼び戻すか？ A/Bテストは勘に頼らずこの質問に答えます。顧客をランダムに2グループに分け、それぞれ異なるバリエーションを提供し、来店数を数えます。計算はビールのコースター1枚に収まります。ここではステップバイステップの手順、カフェの実例、そしてどの時点で差が本当に意味を持つのかというルールを紹介します。
A/Bテストとは何か（そして勘だけでは不十分な理由）
顧客をランダムに2グループに分けます。グループAはバリエーションAを受け取ります。例えば「スタンプ10個でグラティスカプチーノ」。グループBはバリエーションBを受け取ります。例えば「次の購入で20%割引」。決められた期間の後、各グループから何人が戻ってきたかを数えます。
重要なのはランダム性です。 割引を常連客に、グラティス商品を新規客に与えると、キャンペーンではなく常連客と新規客を比較していることになります。ランダム分割により、両グループは平均的に同じになります。その場合、バリエーションだけが差を説明します。
テストなしでは勘が決めます：「割引は好評だった、土曜日は混んでいた。」土曜日はいつも混んでいるという事実は見落とされます。A/Bテストはこの勘を数字に置き換えます。
コントロールグループとの違い
A/Bテストは2つのキャンペーンを比較します。コントロールグループはキャンペーンと何もしないことを比較します。どちらも異なる質問に答えます：
- コントロールグループ： 私のキャンペーンは本当に効果があるのか、それとも顧客はどうせ来ていたのか？
- A/Bテスト： 2つのキャンペーンのうちどちらがより効果的か？
両方を知りたい場合は、3つのグループで作業します：A、B、そしてキャンペーンなしの小さなグループ。コントロールグループの詳細な仕組みと、なぜそれが正直なのかについては、マーケティングにおけるコントロールグループの説明の記事をご覧ください。
A/Bテストの5つのステップ
1. 質問を決める。 テストごとに1つのことだけ変更します：報酬、文言、時間帯、割引率。2つのことを同時に変更すると、最後にどちらが効いたのか分かりません。
2. ランダムに分割する。 デジタルスタンプカードなら簡単：カード番号が偶数ならグループA、奇数ならグループB。両グループは同じサイズにします。
3. 期間を決める。 後ではなく前に。カフェなら14日で十分、理髪店なら6週間程度（来店間隔が長いため）。
4. 成功を定義する。 通常：期間中に少なくとも1回来店した顧客の割合。代替案：顧客当たり売上または利用数。
5. 評価して決定する。 計算方法は次です。
計算：カフェの実例
あるカフェが300枚のアクティブなカードを持ち、弱い火曜日のためにプッシュ通知2つをテストします。150枚のカードはバリエーションA「火曜日：すべてのコーヒーに無料クッキー」を受け取ります。150枚のカードはバリエーションB「火曜日：すべて15%割引」を受け取ります。
4つの火曜日の後、カフェは各グループから少なくとも1回火曜日に来店した顧客数を数えます：
| グループ | 受信者 | 火曜日に来店 | 応答率 |
|---|---|---|---|
| A：無料クッキー | 150 | 33 | 22.0% |
| B：15%割引 | 150 | 24 | 16.0% |
応答率の計算式：
応答率＝来店顧客数÷受信者数×100
バリエーションAは22%、バリエーションBは16%です。差は6パーセントポイント。言い換えると、クッキーは割引より約37%多くの顧客をもたらしました。
さらに：クッキーはカフェに約30セント、6ユーロの会計で15%割引は90セント。バリエーションAはより効果的で、より安い。
差が本当に意味を持つ時点
33対24の顧客は明確に見えます。しかし150人のグループでは、偶然がいくつかの顧客を前後に動かすことができます。小さなお店向けの簡単な経験則（数式なし）：
- 差が3パーセントポイント未満： 結果なし。両方のバリエーションはほぼ同じ、より安い方を選ぶ。
- 差が3～6パーセントポイント： ヒント、証拠ではない。テストを繰り返すか期間を延ばす。
- グループごと最低100人で6パーセントポイント以上の差： 行動するのに十分な信頼性。
グループが小さいほど、差は大きくなければなりません。 グループごと40人では、10パーセントポイントの差でも偶然です。そのため小さなお店では：大きく異なるバリエーションをテストし、「14対15%割引」のようなテストはしません。そして微妙なテスト結果は、プログラムを変更する前にもう一度繰り返す方がいいでしょう。
小さなお店でテストできること
最高のテストは、どうせ決めなければならない決定を中心に回ります：
- 報酬： グラティス商品対割引対その他。あなたのマージンに合う形式については、ロイヤルティプログラムの正しい報酬の記事で詳しく説明しています。
- スタンプ数： 報酬までに8個対10個。注意：新しいカードだけでテストし、既存カードは変更しないでください。
- メッセージの文言： 事実的（「今日2つで1つ」）対個人的（「アンナ、あなたの火曜日のコーヒーが待っています」）。
- 時間帯： 朝8時のメッセージ対11:30。ランチゲストにとって、これはコンテンツより大きな違いを生むことが多いです。
- 時間制限： 終了なしのキャンペーン対「14時まで限定」。このような短期オファーの例はフラッシュセールにあります。
自分でテスト：あなたのテストは公平ですか？
これらの質問にはいまたはいいえで答えてください：
- テスト開始前に質問（何をテストするか）を決めたか？
- 両グループは同じサイズでランダムに分割されているか？
- 期間を事前に決めて、それを守っているか？
- 1つのことだけ変更しているか（報酬、文言、時間帯）？
- チームが両グループを同じに扱っているか（一方のバリエーションを特に言及していないか）？
- 事前に決めた基準で評価しているか（後から変更していないか）？
いいえが1つあると、結果は無意味になります。 公平なテストには統計学ではなく、規律が必要です。
すべてのテストを無意味にする3つの間違い
後から質問を変える。 応答率に差がなければ、突然売上を比較し、それも合わなければ平均注文額を比較します。成功基準を事前に決めて、それを守ってください。
一方のバリエーションが前に出たらテストを中止する。 3日後はA、10日後はB。決めた期間を守ってください。
グループを不平等に扱う。 チームがレジでクッキーキャンペーンについて言及し、割引については言及しないと、キャンペーンではなくチームをテストしています。
何も変えなかったら何が起こるか
テストなしでは、すべてのキャンペーンは勘で実行されます。15%割引を与えます。それが正しく感じるからですが、グラティスクッキーがより多くの顧客をもたらし、コストが低いかもしれません。テストなしの毎週、間違ったキャンペーンにお金を捨てています。比較しないので気づきません。
A/Bテストなら2週間後にどのバリエーションが機能するか分かります。お金を節約し、より多くの顧客を呼び、勘ではなく数字で決定します。
まとめ
小さなお店のA/Bテストは科学ではなく、規律です：1つの質問、ランダムグループ、固定期間、1つの計算。デジタルスタンプカードなら、分割用の顧客番号と評価用のスキャンがダッシュボードに既にあります。今すぐ始める： stampaなら5分でテストが設定でき、無料で100アクティブ顧客まで、クレジットカード不要、月単位でキャンセル可能です。