A/B-тест в маленьком магазине: какая акция работает лучше?
Каждую неделю без теста ты тратишь деньги на неправильную акцию — настраивается за 5 минут, бесплатно до 100 клиентов.
Какая из двух акций вернет больше гостей? A/B-тест ответит на этот вопрос без интуиции. Ты разделяешь клиентов случайно на две группы, даешь каждой другой вариант и считаешь, кто пришел. Расчет умещается на салфетку. Здесь ты найдешь пошаговый процесс, пример из кафе и правила, когда разница действительно имеет значение.
Что такое A/B-тест (и почему интуиция недостаточна)
Ты разделяешь клиентов случайно на две группы. Группа A получает вариант A, например «Бесплатный капучино после 10 печатей». Группа B получает вариант B, например «20 процентов на следующую покупку». После установленного времени ты считаешь, сколько из каждой группы вернулось.
Главное — случайность. Если ты дашь скидку постоянным клиентам, а бесплатный продукт новичкам, ты сравниваешь постоянных с новичками, а не акции. Случайность гарантирует, что обе группы в среднем одинаковые. Тогда только вариант объясняет разницу.
Без теста решает интуиция: «Скидка понравилась, в субботу было полно». Что в субботу всегда полно, остается незамеченным. A/B-тест заменяет это чувство на цифру.
Отличие от контрольной группы
A/B-тест сравнивает две акции между собой. Контрольная группа сравнивает одну акцию с отсутствием акции. Оба отвечают на разные вопросы:
- Контрольная группа: Помогает ли моя акция вообще, или гости пришли бы в любом случае?
- A/B-тест: Какая из двух акций работает лучше?
Если нужны оба ответа, работай с тремя группами: A, B и маленькая группа без акции. Как контрольная группа работает в деталях и почему она честна, объясняет статья Контрольная группа в маркетинге.
A/B-тест в пять шагов
1. Определи один вопрос. Меняй только одно за раз: награду, текст, время или размер скидки. Если менять два сразу, в конце не поймешь, что сработало.
2. Раздели случайно. С цифровыми картами просто: четные номера в группу A, нечетные в группу B. Обе группы должны быть одинакового размера.
3. Установи сроки. Заранее, не потом. Для кафе хватит 14 дней, для парикмахерской скорее шесть недель, потому что интервал между визитами больше.
4. Определи успех. Обычно: доля клиентов, которые пришли хотя бы раз за период. Или: выручка на клиента или количество использованных предложений.
5. Проанализируй и решай. Расчет идет дальше.
Расчет: пример из кафе
Кафе с 300 активными картами тестирует две push-рассылки на слабый вторник. 150 карт получают вариант A: «Вторник: бесплатное печенье к каждому кофе». 150 карт получают вариант B: «Вторник: 15 процентов на все».
После четырех вторников кафе считает, сколько клиентов из каждой группы пришли хотя бы один раз во вторник:
| Группа | Получили | Пришли во вторник | Процент отклика |
|---|---|---|---|
| A: Бесплатное печенье | 150 | 33 | 22,0 процента |
| B: 15 процентов скидки | 150 | 24 | 16,0 процента |
Формула для процента отклика:
Процент отклика = пришедшие клиенты ÷ получившие × 100
Вариант A дает 22 процента, вариант B — 16 процентов. Разница составляет 6 процентных пункта. Другими словами: печенье привлекло примерно на 37 процентов больше гостей, чем скидка.
Плюс: печенье стоит кафе около 30 центов, 15 процентов скидки на чек в 6 евро — 90 центов. Вариант A эффективнее и дешевле.
Когда разница действительно имеет значение
33 против 24 гостей звучит убедительно. Но при 150 человек в группе случайность может сдвинуть несколько гостей туда-сюда. Простое правило для маленьких магазинов, без формул:
- Разница меньше 3 процентных пункта: Нет результата. Оба варианта практически одинаковые, выбери дешевле.
- Разница 3–6 процентных пункта: Намек, не доказательство. Повтори тест или продли период.
- Разница больше 6 процентных пункта при минимум 100 клиентов в группе: Надежно достаточно, чтобы действовать.
Чем меньше группы, тем больше должна быть разница. При 40 клиентов в группе даже 10 процентных пункта — это еще случайность. Поэтому для маленьких магазинов: тестируй варианты, которые сильно отличаются, а не «14 против 15 процентов скидки». И лучше повтори близкий тест, прежде чем менять программу.
Что можно тестировать в маленьком магазине
Лучшие тесты касаются решений, которые ты все равно должен принять:
- Награда: Бесплатный продукт против скидки против бонуса. Какая форма подходит твоей марже, объясняет статья о правильной награде в программе лояльности.
- Количество печатей: 8 против 10 печатей до награды. Внимание: тестируй только на новых картах, существующие не меняй.
- Текст сообщения: Деловой («Сегодня 2 по цене 1») против личного («Анна, твой кофе во вторник ждет»).
- Время: Сообщение в 8:00 против 11:30. Для обеденных гостей это часто важнее, чем содержание.
- Ограничение по времени: Акция без конца против «только до 14:00». Примеры таких коротких предложений найдешь в Флеш-акциях.
Самопроверка: честен ли твой тест?
Ответь да или нет на эти вопросы:
- Я определил вопрос (что тестирую) до начала?
- Обе группы одинакового размера и случайно разделены?
- Я установил сроки заранее и придерживаюсь их?
- Я меняю только одно (награду, текст, время)?
- Моя команда относится к обеим группам одинаково (не упоминает один вариант больше)?
- Я анализирую по заранее установленному критерию (не менял потом)?
Каждое "нет" делает результат бесполезным. Честный тест требует дисциплины, не статистики.
Три ошибки, которые портят любой тест
Менять вопрос потом. Если процент отклика не показывает разницу, вдруг сравниваешь выручку, а если и та не подходит, размер чека. Установи критерий успеха заранее и придерживайся его.
Остановить тест, как только один вариант впереди. После трех дней впереди A, после десяти дней B. Придерживайся установленного срока.
Неравное отношение к группам. Если команда упоминает акцию с печеньем на кассе, а скидку нет, ты тестируешь команду, а не акцию.
Что происходит, если ничего не менять
Без теста каждая акция работает по интуиции. Ты даешь 15 процентов скидки, потому что это кажется правильным, хотя бесплатное печенье привлекает больше гостей и стоит дешевле. Каждую неделю без теста ты тратишь деньги на неправильную акцию. Ты этого не замечаешь, потому что никогда не сравниваешь.
С A/B-тестом через две недели знаешь, какой вариант работает. Ты экономишь деньги, привлекаешь больше гостей и принимаешь решения по цифрам, а не по чувствам.
Итог
A/B-тест в маленьком магазине — не наука, а дисциплина: один вопрос, случайные группы, фиксированный срок, один расчет. С цифровыми картами у тебя уже есть номера клиентов для разделения и сканы для анализа в панели управления. Начни сейчас: С stampa тест настраивается за 5 минут, бесплатно до 100 активных клиентов, без кредитной карты, можно отменить в любой момент.