100 кликов по кампании - это минимум для первичной оценки, 300-500 кликов нужно для серьёзных выводов об эффективности. За 7-14 дней тестирования собираете базовую статистику, но кардинально перестраивать кампанию раньше месяца не стоит - автостратегии Яндекса учатся именно столько.
На практике вижу одну ошибку постоянно: запустили кампанию, через 3 дня паника «не работает», начинают всё перекраивать. Получают кашу вместо данных. Расскажу, как правильно оценивать тесты без потери бюджета.
Минимальные объёмы данных для выводов
Статистическая значимость в рекламе работает жёстко. При 50 кликах разброс конверсии может быть от 0% до 10% случайно, без связи с качеством настройки.
Мои пороги для разных решений:
100-150 кликов - можно оценить технические проблемы. Если отказы под 80%, а время на сайте 10 секунд, то дело не в малой выборке. Здесь правлю посадочные, убираю совсем мусорные фразы.
300-500 кликов - первые выводы по эффективности групп объявлений. Какие направления дают заявки, какие только тратят. Но кампанию кардинально не перестраиваю.
1000+ кликов - можно делать серьёзные выводы и перераспределять бюджеты между группами. Статистика уже не пляшет от случайностей.
В Яндекс.Метрике смотрю отчёт «Источники - Директ» по кампаниям. Столбец «Визиты» показывает клики. Если кампания набрала меньше 100 кликов, выводы делать рано.
Временные рамки для корректной оценки
Кроме объёма кликов важно время. Бизнес работает циклично - есть дни недели и часы с разной активностью.
7 дней - минимум для понимания недельного цикла. Если тестируете B2B услуги, то выходные могут дать нулевые заявки. Это нормально, а не провал кампании.
14 дней - оптимальный срок для первичной оценки. Два полных рабочих цикла дают понимание стабильности результатов.
30 дней - срок для серьёзных выводов. Автостратегии Директа обучаются около месяца, это документированный факт. Раньше судить об их эффективности некорректно.
На практике: запускаю кампанию, через неделю смотрю технические метрики (отказы, глубину, скорость загрузки). Через две недели - первые корректировки по явно неэффективным фразам. Через месяц - полная оценка и решения о масштабировании.
Ключевые метрики для анализа теста
Смотрю метрики в связке, а не по отдельности. Низкая конверсия при хорошем времени на сайте - одно дело, при высоких отказах - совсем другое.
Технические метрики качества трафика:
Отказы до 60% для поиска нормально, выше 75% - проблема с релевантностью или посадочной. В РСЯ отказы выше - до 80% ещё терпимо.
Глубина просмотра меньше 1.5 страниц - трафик поверхностный. Время на сайте меньше 30 секунд для услуг - плохой знак.
Проверяю это в Метрике: «Отчёты - Источники трафика - Директ». Выбираю кампанию, смотрю показатели качества.
Бизнес-метрики:
Конверсия в заявку - основная метрика. Но оцениваю её только при достаточном объёме данных.
Цена клика и заявки. Если цена клика растёт без роста конверсии, значит попадаем на более конкурентные запросы.
Стоимость заявки считаю как расход кампании делённый на количество целевых действий. В Метрике настраиваю цели на конкретные действия - отправку формы, клик по телефону.
Когда можно делать первые корректировки
Правки делаю поэтапно, не всё сразу. Если менять одновременно фразы, объявления и ставки, то непонятно, что сработало.
Первая неделя - только критичные правки:
Убираю фразы с отказами выше 90% и временем на сайте меньше 10 секунд. Это явный мусор.
Исправляю техническое - нерабочие ссылки, медленную загрузку посадочной.
Добавляю очевидные минус-слова, если вижу в поисковых запросах откровенно не целевые показы.
Вторая неделя - корректировки по данным:
Снижаю ставки на фразы с высокой ценой клика, но без заявок. Не отключаю совсем, просто делаю менее агрессивными.
Повышаю ставки на фразы, которые дали заявки, но показываются редко из-за низких позиций.
Дорабатываю объявления для групп с низким CTR, если проблема не в позициях.
Третья-четвёртая неделя - оптимизация:
Перераспределяю бюджет между группами объявлений на основе собранной статистики.
Масштабирую работающие направления - добавляю похожие фразы, создаю отдельные группы под эффективные запросы.
Отключаю группы, которые за месяц не дали ни одной заявки при достаточном трафике.
Как избежать ложных выводов из-за малой выборки
Самая частая ошибка - делать выводы по 2-3 заявкам. «Эта фраза дала заявку за 500 рублей, а эта за 2000, значит первая лучше». При малой выборке это может быть случайность.
Использую правило: если разница в показателях меньше 50%, а данных мало (до 200 кликов), то это статистический шум. Кардинальных решений не принимаю.
Пример: одна группа дала 2 заявки из 150 кликов (конверсия 1.33%), другая 1 заявку из 120 кликов (0.83%). Разница есть, но она не значимая. Нужно больше данных.
Для проверки значимости иногда использую онлайн-калькуляторы A/B тестов. Вбиваю количество кликов и конверсий, смотрю уровень достоверности. Если меньше 90%, выводы не делаю.
Ещё один способ - смотреть динамику по дням. Если показатели скачут хаотично, данных мало. Если есть тренд - можно делать осторожные выводы.
Анализ поисковых запросов без поспешных решений
Отчёт по поисковым запросам - золотая жила, но и источник ошибок. Один «плохой» запрос не повод рубить всю фразу.
Открываю в Директе «Отчёты - Поисковые запросы». Сортирую по расходу - сначала анализирую дорогие запросы.
Запрос съел 20% бюджета без заявок? Добавляю в минус-слова. Но если запрос потратил 200 рублей без результата, это ещё не критично - может просто не повезло.
Смотрю группы запросов, а не отдельные фразы. Если все запросы по теме «цена» не конвертят, то проблема в этом направлении целиком.
Особенно осторожен с брендовыми запросами. Они могут не давать заявок, но влиять на узнаваемость. Их анализирую отдельно.
Полезная практика - экспортирую запросы в Excel, группирую по смыслу. Так легче увидеть закономерности, чем разбирать каждый запрос отдельно.
Работа с автостратегиями в период тестирования
Автостратегии нужно время для обучения. Первые 2-3 недели они могут показывать странные результаты - это нормально.
«Максимум конверсий» и «Целевая стоимость конверсии» начинают работать стабильно после 30-50 конверсий в месяц. До этого алгоритм учится и может перебивать ставки.
Не меняю настройки автостратегий первый месяц, только если совсем критично. Целевую стоимость конверсии корректирую не чаще раза в неделю и не более чем на 20-30%.
Если автостратегия тратит весь бюджет на 2-3 фразы, добавляю ограничения максимальной ставки. Ставлю потолок в 1.5-2 раза выше средней ставки по группе.
Веду дневник изменений - записываю дату, что поменял, почему. Через месяц анализирую, какие правки помогли, какие навредили.
Сегментация данных для точного анализа
Общие показатели по кампании могут обманывать. Реклама работает по-разному в будни и выходные, утром и вечером, на поиске и в РСЯ.
В Метрике использую сегментацию по источникам. Отдельно анализирую: - Поиск vs РСЯ - Десктоп vs мобайл - Дни недели и часы - Регионы (если ведём в нескольких)
Часто вижу ситуацию: кампания в целом убыточна, но поиск в рабочее время даёт хорошие заявки. Проблема в РСЯ или показах ночью. Без сегментации это не увидеть.
Создаю сегменты в Метрике: «Отчёты - Сегменты - Создать сегмент». Настраиваю условия по источнику трафика, времени, устройствам.
Сохраняю полезные сегменты, чтобы использовать для всех кампаний. Это экономит время на анализе.
Частые ошибки при оценке тестов
Первая ошибка - сравнивать кампании в разное время. Запустили тест в понедельник, сравниваете с результатами пятницы. Активность аудитории разная, выводы ложные.
Вторая - не учитывать внешние факторы. Праздники, сезонность, действия конкурентов влияют на результаты. Если конверсия упала во время новогодних каникул, это не значит, что кампания испортилась.
Третья - менять несколько параметров одновременно. Поменяли объявления, ставки и посадочную в один день. Что повлияло на результат - непонятно.
Четвёртая - игнорировать задержку в данных. Заявки могут приходить с задержкой, особенно в B2B. Сегодня кликнули, завтра подумали, послезавтра оставили заявку. Оцениваю кампанию с отставанием в 2-3 дня.
Пятая - не настроить корректное отслеживание целей. Если цели в Метрике настроены неправильно, все выводы будут ошибочными.
Инструменты для корректного анализа
Основной инструмент - Яндекс.Метрика с правильно настроенными целями. Цель на клик по телефону привязываю к конкретному номеру, а не к любой ссылке tel:. Иначе боты создают ложные срабатывания.
Использую UTM-метки для детального отслеживания. В Директе они проставляются автоматически, но проверяю корректность передачи данных в Метрику.
Дополнительно веду Excel-таблицу с ежедневной статистикой. Записываю расход, клики, заявки, изменения в кампании. Помогает видеть тренды и связи.
Для анализа поведения на сайте использую Вебвизор. Если конверсия низкая, смотрю записи сессий - где пользователи «спотыкаются», почему не оставляют заявки.
Иногда подключаю Яндекс.Аудитории для ретаргетинга на посетителей. Это дополнительный способ «дожать» тёплый трафик.
Когда останавливать неэффективный тест
Чёткие критерии остановки помогают не сливать бюджет на заведомо провальные направления.
Останавливаю кампанию, если: - За 2 недели при 300+ кликах 0 заявок - Цена заявки в 3+ раза выше планируемой при достаточной статистике - Отказы стабильно выше 85% на поиске - Технические проблемы, которые невозможно быстро исправить
Но не останавливаю из-за: - 2-3 дня без заявок - Высокой цены клика, если конверсия нормальная - Низкого CTR в первую неделю (объявления могут разойтись позже) - Плохих результатов в выходные для B2B
Перед остановкой всегда проверяю альтернативные гипотезы. Может, проблема не в настройке рекламы, а в посадочной странице или оффере.
