Слили $1800 на camp test в iGaming DE за 4 дня. CTR прыгал 1.4–3.2%, CR на преленде держался в районе 6%, ROI к концу теста — минус 31%. На бумаге всё выглядело как обычный неудачный заход. Но когда я сел разбирать, что именно мы тестировали — оказалось, что ничего конкретного. Меняли крео, аудитории, плейсменты по два за итерацию, без чёткой гипотезы. Это не camp test, это покупка случайных данных по цене двух нормальных запусков.
Расскажу, как мы потом перебрали логику и какие правила теперь действуют у нас на проде — на потоке примерно 5М кликов в месяц через 3 трекера. Главная мысль: связка либо подтверждается гипотезой, либо тебе просто повезло с аукционом, и через неделю слив бюджета вернёт всё на землю.
Гипотеза первична, кабинет вторичен
Когда арбитр запускает camp test без сформулированного вопроса, он на самом деле тестирует не связку, а свою выносливость. Сегодня поменял интерес, завтра креатив, послезавтра преленд — и через неделю на руках 60 строк статистики, из которых нельзя достать ни одного устойчивого вывода. У нас на проде правило простое: пока я не могу одной фразой сформулировать, ЧТО именно проверяю, кабинет не открываю.
Гипотеза для теста на iGaming DE могла бы звучать так: «холодная аудитория 35–55 в DE реагирует на угол через ностальгию по слот-механике лучше, чем на угол через быстрый выигрыш». Это проверяемо. Дальше под неё подбираются 2 креатива в каждый угол, один преленд, фиксированный плейсмент. Всё остальное — заморожено. Иначе ты не отделишь, что отработал угол подачи, а что — просто свежий креатив в выдаче.
Разные ниши — разные вопросы
Я делю ниши на три условные группы по тому, что вообще имеет смысл проверять первым. Гэмблинг и нутра в холодном трафике — это в первую очередь тест угла и доверия преленда. Финансы и брокеры — тест на готовность аудитории к длинному объяснению, потому что лид без понимания инструмента отвалится на колл-центре. Локальные услуги, инфопродукты, e-com — тест на узость сегмента, потому что широкий таргет там даёт мусорный лид при красивом CTR.
Когда лил на $400/день в гео IT по нутре, ошибка была ровно в этом: использовал тестовую рамку из гэмблинга — широкий заход, два угла, эмоциональный крео. CTR был 2.8%, заявок куча, апрув на колл-центре — 11%. Связка казалась рабочей, по факту мы продавали воздух людям, которые не понимали, что заказывают. Поменяли вопрос теста на «выдерживает ли преленд медицинскую конкретику без потери конверсии» — и через 9 дней апрув поднялся до 27%, ROI вышел в плюс 44%.
3 первичных параметра и 2 вторичных слоя
Сначала всегда проверяю базу. Только три параметра, всё остальное замораживаю:
- Угол подачи — цепляет ли первый смысл в крео нужный сегмент. Если CTR ниже бенчмарка по нише в 1.5 раза — угол мёртвый, дальше копать бесполезно.
- Связь крео и преленда — совпадает ли ожидание из объявления с тем, что человек видит после клика. Чаще всего просадка между CTR и кликом на CTA преленда — это разрыв смысла, а не качество дизайна.
- Базовое доверие оффера — нет ли отказа на этапе заполнения формы. Если из 100 кликов на CTA заявку оставляют 12, а из этих 12 валидных только 3 — проблема не в трафике, а в упаковке оффера.
Эти три слоя дают ответ — связка вообще имеет шанс жить в этой нише или нет. Только когда первичная база подтверждена, переходим к вторичным слоям анализа: сегментация аудитории внутри подтверждённого угла и сравнение плейсментов на устойчивость качества лида. Это уже не про «работает или нет», а про «где работает лучше».
Почему сегменты тестируем вторым шагом
Видел десятки тестов, где арбитр сразу шёл в сравнение интересов: 8 сегментов, по $50 на каждый, через двое суток выводы. Это не сравнение сегментов, это сравнение того, какому интересу алгоритм случайно отдал жирный аукцион в первые сутки. Чтобы реально отделить сильный сегмент от шума, нужно минимум 200 событий конверсии на каждый — иначе вариативность съест разницу. На $50 ты этого не получишь нигде, кроме совсем дешёвых гео.
Плюс в тесте может быть случайным
Самая дорогая ошибка — масштабировать связку, которая дала плюс по необъяснимой причине. У меня был кейс на e-com в US: тест на $600 показал ROAS 280% за 3 дня. Залил бюджет в 5 раз, на 6-й день ROAS обвалился до 90% и продолжал падать. Разбор показал: первичный плюс пришёлся на выходной с локальным праздником и резким падением конкуренции в аукционе. Я этого не зафиксировал в гипотезе, потому что не задавался вопросом «при каких условиях этот результат повторится».
Если ты после теста не можешь объяснить, ПОЧЕМУ связка отработала — связка не проверена. Объясняется углом? Тогда меняешь крео внутри угла и смотришь, держится ли паттерн. Объясняется аудиторией? Тогда сужаешь сегмент и проверяешь стабильность. Объясняется временем суток или днём недели? Тогда у тебя на руках не связка, а удачный отрезок аукциона, и масштабирование сольёт бюджет.
Как формулировать выводы, чтобы их можно было повторить
После каждого camp test я пишу вывод в одну строку по шаблону: «сегмент X на угле Y через плейсмент Z даёт лид качества N при цене M в условиях K». Если хоть один из этих кусков остался размытым — тест не закрыт, надо добирать данные. Размытые формулировки типа «вот этот креатив зашёл лучше» через 2 недели в голове превращаются в кашу, и при попытке повторить заход ты уже не помнишь, что именно работало.
Например, по тому самому тесту на iGaming DE финальный вывод после переработки звучал так: «мужчины 38–52 в DE на угол «вспомни автоматы из 90-х» через плейсмент native в выходные дают цену лида €4.20 при апруве 34% в окне 7 дней». Это уже знание, по нему можно строить масштабирование. А «гэмблинг DE через ностальгию работает» — это не знание, это твиттер-пост.
Чек-лист перед запуском camp test
- Сформулировал гипотезу одной фразой и записал её до открытия кабинета
- Зафиксировал, какие 3 первичных параметра тестирую, остальное заморозил
- Прикинул минимальный объём данных на каждую ветку — не меньше 200 конверсий или $300 на ветку, что наступит раньше
- Определил критерий провала заранее: какой результат я приму как «гипотеза не подтвердилась»
- Записал, при каких условиях результат должен повториться — это страховка от случайного плюса
- Не запускаю сегментацию аудитории первой итерацией, пока не проверена базовая связь крео-преленд-оффер
- После теста — однострочный вывод по шаблону, иначе тест не закрыт
Если соблюдаешь эти правила, camp test перестаёт быть лотереей и начинает покупать тебе не только трафик, но и понимание ниши. Скалирование на знании работает в разы предсказуемее, чем масштаб на удачном отрезке аукциона, — это уже проверено на нескольких десятках связок в гэмблинге, нутре и e-com.
