10.07.2020

Объявления — это единственный элемент в PPC, который видит поисковик и пользователь. Остальные настройки просто говорят, когда их показывать. 

Если тестировать объявления правильно, можно повысить количество конверсий, снизить затраты на них, увеличить показатель качества и получить много других плюшек. Что значит «правильно» — в нашем сегодняшнем письме. 

Тестирование одной группы объявлений

В одной группе создается 2 и больше объявлений, а по итогам выбирается объявление-победитель с лучшими результатами. 

Подойдет, если нужно выбрать лучший месседж пользователю при одном способе таргетинга (ключи, списки ремаркетинга, интересы, темы и т. д). Как правило, это лучший метод тестирования:

🐧 брендовых запросов;

🐧 самых эффективных ключевых слов;

🐧непосредственно способов таргетинга, при которых собирается большое количество данных.

Не подойдет, если:

🐧 у группы объявлений маленький охват (сложно добиться статистически значимых результатов); 

🐧 тест-группа очень отличается от остальных (тогда результаты будут применимы только внутри одной группы; а остальные по мотивам не оптимизируешь).

В этом случае, подойдет… 

Мультитестирование

(тестирование нескольких групп объявлений)

Мультитест позволяет проверить заголовок, описание и другие параметры сразу в нескольких группах объявлений, а затем объединить полученные данные.

Несколько основных преимуществ:

🐧 в процессе собирается больше данных для оценки;

🐧 появляются глобальные инсайты;

🐧 эффективность выше, ведь полученные результаты применимы ко всем группам-участницам теста.

Что можно так тестировать? Вот пара идей для вашего следующего теста:

  1. Увеличивает ли CTR использование геоданных.
  2. Что дает лучший показатель переходов/конверсий из Поиска: предложение скидки или бесплатной доставки в объявлении.
  3. Как расширения влияют на эффективность РРС (на показатель CTR, конверсии и т. д.).
  4. Что работает лучше в заголовке: выгода, СТА или что-то другое.
  5. Что работает лучше в описании: акцент на широком ассортименте или на поддержке клиентов.
  6. Как влияет использование бренда в объявлении на его эффективность. Что если добавлять в заголовок название бренда? А если нет? А если добавить его в описание?

Каждый вопрос — гипотеза. Какую из них вы пойдете проверять, когда дочитаете письмо? 🙂 

Как проводить тестирование

Тестирование включает 7 шагов:

  1. Выбор групп объявлений, которые будут участвовать в тесте.
  2. Выбор гипотезы, которая тестируется.
  3. Организация групп объявлений.
  4. Сбор данных.
  5. Оценивание данных.
  6. Проверка статистической значимости.
  7. Принятие решения.

Как выбрать группу для теста

Чтобы тестировать вместе разные группы, важно, чтобы они были сравнимы. Кислое и сладкое сравнимо. Желтое и пингвин — нет. 

К примеру, мы хотим потестить какое-то расширение и берем 3 группы:

🐧 в одной брендовые ключи;

🐧 во второй небрендовые;

🐧 в третьей и те, и другие.

Результаты такого теста будут недостоверными, потому что у тестовых групп отличаются исходные условия. 

Используйте для мультитеста группы с похожими методами таргетинга, к примеру, только те, которые таргетируются на списки ремаркетинга. Или только на брендовые ключи. Это — те общие признаки, которые делают тестирование заслуживающим доверия.

Плюс для теста можно создавать группы объявлений с жестким делением по ключам. Это помогает получить больше крутых инсайтов.

К примеру. Фирма по перепланировке и ремонту жилья сегментирует ключи для поисковых кампаний так:

🐧 брендовые ключи;

🐧 запросы на дорогой ремонт (как капитальный ремонт квартиры под ключ);

🐧запросы на доступный ремонт (как перепланировка ванной комнаты);

🐧запросы на дешевый ремонт (как косметический ремонт одной комнаты);

🐧 услуги (установка откосов, разводка электричества) и т. д.

После мультитеста фирма проанализировала результаты и поняла, что пользователи, которые хотят дорогие услуги, всегда запрашивают предварительную оценку стоимости и индивидуальный осмотр объекта. Для этого на этапе «приценивания» они звонят менеджеру.

Но! Не все пользователи хотят звонить менеджеру сами. Всегда есть те, кто хочет оставить заявку на обратный звонок или получить консультацию по переписке.

Как только у фирмы появились эти данные, РРС-специалист понял, как улучшить рекламу. Как он использовал данные:

Пользователю нужен телефонный звонок до заказа? Значит, в объявлении нужно добавить расширение с номером, а на сайте сделать форму заказа обратного звонка + указать номера телефонов на видном месте. Нужна смета, а мастер выезжает на объект для предварительной оценки бесплатно? Это важно указать в описании объявления, чтобы люди были в курсе такой ценной выгоды. И так далее.

После теста у вас на руках будет масса данных. Чтобы в них не запутаться, помечайте группы ярлыками. Проверяете гипотезу по геоданным? Пометьте одну группу ярлыком «гео», а вторую «без гео». Ярлыки — простой способ сводить данные в единую статистику для оценки результатов.

Как выбрать гипотезу

Основная фишка тестов — не мешать котлеты с мухами и тестировать все планомерно.

К примеру, есть такие варианты СТА:

Позвоните нам сегодня

Позвоните нам сегодня!

И это действительно разные варианты, тестировать нужно оба.

Помните про принцип «копать глубже».

Если вы тестите геоданные в объявлениях, не торопитесь постепенно проверять все 100500 вариантов указания местоположений, как:

Сантехник в Киеве

Сантехник в Одессе

Сантехник в Днепре

Местные услуги сантехника.

В этом случае тестить нужно только два варианта:

Сантехник в 

Местные услуги сантехника.

Вот такой тест покажет, как указание геоданных влияет на взаимодействие пользователя с поисковым объявлением.

Тот же принцип можно использовать, чтобы проверить, что работает лучше — привлечение ценой или скидками:

Сэкономьте до ХХ% с <товар>

<товары> от <цена>

Сформулировали гипотезу? Создайте минимум два объявления в каждой группе мультитеста. Если трафика много, можно тестировать 3-4 идеи за раз. Только разберитесь с критериями оценки и с тем, как переменные данные коррелируют друг с другом.

Как собирать данные

После выбора гипотезы и группы все только начинается, ведь надо узнать, как собирать инфу и сколько ее нужно.

Начнем с «как».

Ротация объявлений

Если в вашей группе несколько объявлений, системе надо выбрать, какое из них показывать. Ротация — это настройка на уровне кампаний, которая определяет, КАК их чередовать.


По умолчанию используется «Оптимизация для кликов»: чаще демонстрируются объявления с самым высоким CTR. Обычно этого достаточно, но для мультитеста мы советуем вариант «Чередовать без ограничения времени», чтобы каждое объявление получало плюс-минус одинаковый охват.

С «как собирать» разобрались, теперь посмотрим, «сколько собирать».

Минимально необходимый массив данных

Это тот абсолютный минимум информации, который нужен, чтобы закончить тест и получить достоверные результаты. Но давайте лучше на примере.

Мы тестируем 3 варианта заголовков:

🐧 вариант А получил 1 клик, 40 показов;

🐧 вариант Б получил 5 кликов, 33 показов;

🐧 вариант В получил 0 кликов, 24 показов.

Всего 97 показов и 6 кликов. С чисто математической точки зрения, вариант Б достиг 97 % уровня доверия (это объявление будет иметь самый высокий CTR). НО! Риск в том, что все эти данные могли быть собраны в течение 1 часа во вторник вечером, потому что показов очень мало. А значит, статистической достоверности у них не будет: активность пользователей в разные дни недели и время отличается. 

Если ориентироваться на показы за день, результаты будут недостоверными. А значит, есть риск внедрить неэффективное решение.

Чтобы определить необходимый минимум данных, нужно:

1. Выбрать метрики: одни учитывать обязательно, другие вариативны. 

Показатель

Показы

Клики

Конверсии

Временные рамки

CTR

Обязательно

Вариативно

 

Обязательно

CPA

  

Обязательно

Обязательно

Коэффициент конверсий

 

Вариативно

Обязательно

Обязательно

CPI

Обязательно

 

Вариативно

Обязательно

ROAS

  

Обязательно

Обязательно

RPI

  

Обязательно

Обязательно

2. Задать время теста: минимум неделя, мы рекомендуем месяц. 

3. Установить минимальную планку: сколько данных нужно, чтобы закончить тест. Чем выше цифры «минимума», тем выше шансы на достоверные результаты. 

 

Показы

Клики

Конверсии

Низкий трафик

350

300

7

Средний трафик

750

500

13

Высокий трафик

1000

1000

20

Хорошо известные брендовые запросы

100 000

10 000

100-1 000

Шпаргалка со средними значениями, на которые можно ориентироваться 

Максимально необходимый набор данных

Бывает, запускаешь тест, ждешь месяц, два, -цать, а уверенности в результатах нет. Чтобы не ждать вечно, задайте «потолок»: сколько нужно данных для завершения теста, вне зависимости от результатов. Есть 2 способа:

🐧 тест работает [х] месяцев — проще;

🐧 тест работает, пока не соберем х10 минимальных данных — качественнее.

Как оценивать данные?

Тест — это когда у вас есть:

🐧 гипотеза: идея, которую вы хотите проверить;

🐧 подопытное нечто: в нашем случае объявления;

🐧 параметры, подтверждающие или опровергающие гипотезу, — критерии оценивания.

Критерии оценивания

Чтобы отобрать среди всех участников объявление-победителя, можно использовать разные параметры:

CTR, кликабельность:

🐧 плюс: вы получите максимум кликов, доступных объявлениям. Чем больше кликов, тем выше QS, что тоже приятно;

🐧 минус: CTR — это про количество кликов, а не их качество. Поэтому мы советуем использовать конверсионные метрики, а не «кликовые». 

Conversion rate, коэффициент конверсии:

🐧 плюс: объявление задает ожидания пользователей насчет целевой страницы. Правильно заданные ожидания увеличивают коэффициент конверсии. Так что если цель — получать конверсию с (по возможности) каждого посещения посадочной страницы, то Conversion Rate — для вас;

🐧 минус: учитываются только конверсии на странице и не считаются конверсии по звонкам, в офлайн-точках и т. д. Отличная метрика для посадочных, но не для объявлений.

CPA, стоимость конверсии:

🐧 плюс: подойдет, если у вас есть четкие цели по снижению цены за конверсию и увеличению продаж;

🐧 минус: если CTR не волнует качество трафика, то CPA не волнует его количество. Вы будете получать данные о стоимости клика, но не о том, насколько часто реально по нему кликают.

ROAS, возврат рекламных инвестиций:

🐧 плюс: обеспечит соответствие рекламных расходов получаемой прибыли;

🐧 минус: не учитывает охват пользователей и считает только траты — а траты происходят только тогда, когда пользователь нажимает на ваше объявление. Действия и эффективность рекламы ни до, ни после не учитывается.

Основный недостаток всех показателей (кроме CTR) — они не учитывают объемы; во внимание принимается только стоимость конверсии. Но ведь когда мы говорим про поисковые кампании подразумевается, что каждый показ — это шанс на конверсию.

Поэтому, чтобы рассматривать объем (CTR) и данные конверсии (коэффициент конверсии или доход) в одном показателе для тестирования рекламы, вы можете использовать CPI (конверсия за показ) или RPI (доход за показ) в качестве основных показателей тестирования и критериев отбора объявлений-победителей.

Их несложно считать: поделите конверсии (или доход) на количество показов. Чем выше CPI или RPI, тем больше денег вы получаете при каждом показе. Как правило, это лучшие критерии отбора.

Использование двух критериев для оценивания

Если показатель основан на числе показов, он не учитывает любые жесткие ограничения РРС-рекламы. К примеру, если вам нужно достигнуть определенной цены за конверсию или выполнить какой-то норматив по ROAS. Это — существенный недостаток.

Если у вас есть жесткие рамки в РРС, попробуйте двухступенчатое оценивание:

Шаг 1: ROAS или CPA в качестве «фильтрующих» метрик.

Шаг 2: CPI или RPI для выбора объявления-победителя.

*Для сведения результатов из разных групп объявлений в одну общую статистику можно использовать сводные таблицы Excel или специальные сервисы для РРС, типа англоязычного Adalysis.com или русскоязычного аналога HTraffic.

Как определить статистическую значимость? А уровень доверия?

Уровень доверия показывает, что результат вызван не случайностью, а объяснимыми факторами. Он обеспечивает статистическую значимость и доказывает достоверность теста.

Как и где определить статистическую значимость:

  1. Сервис htraffic.ru.
  2. Плагин Excel, к примеру, Analysis ToolPak.

Заметочка в помощь:

Параметр

Минимально необходимый уровень доверия

НЧ запросы

90 %

СЧ запросы

90-95 %

Запросы по сторонним брендам, которые вы продаете

90 % для небольших брендов, 95 % для крупных брендов

ВЧ запросы

95-99 %

Ваши брендовые запросы

95 % для неизвестного бренда, 99 % для хорошо известного бренда

Как принимать решения о победителе?

Для тестов отдельных групп два варианта:

  1. Остановить проигравший вариант.
  2. (Необязательно) создать новое рекламное объявление с вариантом-победителем.

Для мультитеста вариантов больше:

  1. Приостановить проигравший вариант во всех группах объявлений.
  2. (Необязательно) заменить проигравшие варианты новыми для следующего теста.
  3. (Необязательно) создать новый мультитест для другой гипотезы в тех же группах объявлений, которые тестировались раньше.
  4. Собрать другие инсайты.

Информацию из теста можно использовать не только в объявлениях, но и на посадочных, в баннерах, соцсетях, статьях etc. 

Тестировали СТА? Вариант, на который реагировали лучше всего, можно использовать в массе материалов. Да, перфоманс у разного контента может отличаться, но обычно ненамного. Также можно делать с преимуществами, СТА, описаниями, выгодами, изображениями и всеми другими элементами РРС, которые поддаются тестированию. Обращайте внимание на все идеи, делитесь ими со своей командой и ищите, как еще использовать эту информацию.

До скорого!

Наш сайт использует файлы cookie, чтобы улучшить работу и предоставить максимальное удобство пользователям.

В версии 3.0.0

  • новые сервисы: Ubersuggest (NeilPatel), Spyfu и другие;
  • автосохранение списка минус-слов в рабочей области;
  • авторизация для хранения данных в аккаунте;
  • списки типовых минус-слов;
  • возможность хранить пользовательские списки минус-слова в расширении для дальнейшего применения в аккаунте;
  • англоязычный и русскоязычный интерфейс.

Основные комбинации

  • LeftMouseClick для добавления слова, повторное нажатие - для удаления
  • LeftALT + LeftMouseClick - для сбора фраз
  • LeftALT + S - для поиска слов

In version 3.0.0

  • new services: Ubersuggest (NeilPatel), Spyfu and others;
  • autosave of a negative keywords list in the workspace;
  • authorization for storing data in the account;
  • generic negative keyword lists;
  • the ability to store custom lists of negative keywords in the extension for further use in your account;
  • English and Russian interface.

Key combinations

  • LeftMouseClick to add a word, press again - to delete
  • LeftALT + LeftMouseClick - to collect phrases
  • LeftALT + S - for words searching

В версии 2.0

  • 2 режима выдачи ключевых слов:
  • быстрая выдача - аналогична выдаче Google Planner, но найденные результаты включают каждое слово из введенной в поиск фразы;
  • полная выдача - расширенная выдача, которая включает поиск по дополнительным релевантным фразам, но найденные результаты также включают каждое слово из введенной в поиск фразы.
  • Обновленный файл выгрузки ключевых слов Excel:
  • выгрузка локаций в удобном формате для загрузки в Editor;
  • обновленный шаблон для создания объявлений.
  • Полный список локаций.
  • Группировка отчетов по проектам.
  • Устранена ошибка с задержкой в 30 секунд.
  • Новые фильтры для получения релевантной выдачи.
  • Копирование минус-слов.

In version 2.0:

  • 2 modes of keywords search result:
  • quick search result - is similar to one of Google Planner , but the results found include every word of the phrase entered in the search;
  • full search result - extended search result that includes search on additional relevant phrases, but the results found also include every word of the phrase entered in the search.
  • Updated Exces Keyword Upload File:
  • uploading of locations in a convenient format for uploading to Editor;
  • updated template for creating ads.
  • Full list of locations.
  • Grouping of reports on the projects.
  • Fixed an error with a delay of 30 seconds.
  • New filters for getting relevant search results.
  • Copying of negative keywords.

Несколько шагов до работы в Penguin

Заполните форму

Прикрепите резюме:
1Кликов 259, показов 3 515. Чему равен CTR?
2Заходов на сайт 874, конверсий 16. Чему равен коэффициент конверсии?
3Что такое СРА?
4CTR 4,03%, кликов 240. Чему равно число показов объявления?
5Затрат 20 158, конверсий 63. Чему равна стоимость конверсии?

Несколько шагов до работы в Penguin

Заполните форму

Прикрепите резюме:

Познакомимся?

Денис Березкин

Кем вы работаете?

Выберите один из вариантов