Как тестировать дейтинг-креативы в разных GEO и источниках

Время прочтения: 22 минуты

Похоже, креативы для дейтинга не показывают одинаково стабильную эффективность в разных GEO и плейсментах. Заголовок, который получает много кликов в одном GEO, может не сработать после перевода на другой язык. Даже изображение, которое приносит много кликов в органическом трафике, по разным причинам может стать неэффективным в push- и display-рекламе.

Однако такой анализ необходим, поскольку он помогает разделить факторы, влияющие на эффективность рекламного креатива в дейтинг-партнерском маркетинге: язык, культуру, распределение по устройствам, тип плейсмента, намерение пользователя и конверсионную воронку. Поэтому главная цель этого процесса — выстроить систему тестирования, которая включает следующие шаги: создание базового варианта, сегментацию трафика, изменение только одной переменной за раз, мониторинг и отслеживание результатов, выявление эффективных вариантов и повторное тестирование.

Такой анализ особенно необходим, когда трафик поступает из нескольких стран и разных источников дейтинг-трафика. Именно поэтому, согласно рекомендациям Adverten по сопоставлению кампаний с источниками трафика, те же факторы влияют на результаты кампании.

TL;DR

• Сегментируйте GEO перед сравнением креативов.
• Не объединяйте источники трафика, которые используют разные форматы и/или работают в разных средах.
• Настройте базовый вариант перед запуском новых версий.
• По возможности тестируйте один ключевой параметр креатива.
• Всегда отслеживайте варианты с помощью Creative ID и параметров кампании.
• CTR измеряет вовлеченность, но не является конечным показателем.
• Сравнивайте эффективность креативов с конверсиями, EPC, CPA и показателями подтвержденных действий.
• Локализуйте выигрышные варианты для каждого региона; не копируйте их бездумно.
• Повторно тестируйте после масштабирования, изменения источников трафика, плейсментов и т. д.
• Победитель — это сочетание креатива, GEO, источника трафика, аудитории и воронки, а не только отдельный рекламный материал.

Содержание

• Что контролировать перед тестированием дейтинг-креативов
• Шаг 1: Создайте базовый вариант для тестирования креативов
• Шаг 2: Тестируйте дейтинг-креативы в разных GEO
• Шаг 3: Тестируйте дейтинг-креативы в разных источниках трафика
• Шаг 4: Оценивайте эффективность креативов не только по CTR
• Шаг 5: Сравните результаты и определите, что тестировать повторно
• Распространенные ошибки при тестировании дейтинг-креативов
• Экспертные советы для более эффективного тестирования дейтинг-креативов
• Кейс тестирования дейтинг-креативов: иллюстративный сценарий
• Вывод: создайте систему тестирования вместо поиска одного креатива
• FAQ о тестировании дейтинг-креативов

Вступление

Аудитории дейтинг-сайтов различаются. Например, в США Pew Research Center выяснил, что 53% взрослых в возрасте от 18 до 29 лет в какой-то момент своей жизни пользовались сайтом или приложением для знакомств; среди людей от 30 до 49 лет таких было 37%; среди людей от 50 до 64 лет — только 20%; а среди людей 65 лет и старше — 13%. Эти показатели различаются в зависимости от сексуальной ориентации и семейного положения. Эти данные нельзя использовать как бенчмарки для дейтинг-кампании, но они объясняют, почему единое понятие «дейтинг-аудитория» может вводить в заблуждение.

Адаптация креатива может зависеть от языка, культуры, устройства, позиции и даже источника трафика. Нативные заголовки, уведомления, баннеры и видео дают пользователям разный объем информации до клика. Тестирование этих элементов как равнозначных может скрыть важную информацию.

Однако проведение большего количества тестов — это не просто увеличение числа вариантов креатива. Цель заключается в том, чтобы настроить тесты, которые отвечают на конкретный вопрос и помогают принять решение. В разделах ниже описан процесс тестирования рекламных креативов.

Что контролировать перед тестированием дейтинг-креативов

Если в кампании одновременно меняется несколько переменных, интерпретировать результаты становится сложно, поскольку креатив уже не является единственной значимой переменной. До начала тестирования зафиксируйте все элементы, которые могут влиять на действия пользователей: источник трафика, GEO, распределение по устройствам, плейсмент, лендинг или прелендинг, точку конверсии, детали оффера и все остальное, что может повлиять на поведение пользователей. Некоторые переменные в активной кампании, например доступность инвентаря или состав аудитории, все равно будут меняться во время тестирования; такие изменения также нужно фиксировать.

Как GEO меняет реакцию на креатив

GEO — это не только код страны. Оно может отражать различия в языке, локальных терминах, культурных нормах, развитии рынка, возможностях устройств и даже в том, как интерпретируется одно и то же сообщение.

Перед проведением A/B-тестов дейтинг-креативов изучите, какой язык использует ваша целевая аудитория, локальные термины для знакомств и регистрационных действий, подходящий тон, насколько понятно выглядит изображение на этом рынке и как CTA воспринимается в контексте. Форматы даты и времени, а также правила записи валюты и чисел также могут иметь значение, если они присутствуют в креативе или на посадочной странице.

Не создавайте стереотипы об аудитории на основе общих представлений о стране. Одно из преимуществ GEO-сегментации заключается в том, что вы можете тестировать различия, а не делать предположения. Вот гайд Adverten о дейтинг-GEO в Германии и дейтинг-трафике в США.

Как источник трафика меняет контекст креатива

Одно и то же сообщение может выглядеть по-разному в зависимости от источника трафика, через который его видит пользователь.

• Native-трафик — заголовок и изображение должны работать как единое целое в редакционном контексте.
• Push-трафик — сообщение должно быть понятным с первого взгляда в небольшом блоке.
• Display-трафик — ограничения формата и визуальная иерархия, вероятно, будут иметь большее влияние.
• Social-трафик — на сообщение влияют первый кадр, формат, хук и контекст аудитории.
• Referral/Content-трафик — сообщение может появиться после того, как пользователь уже ознакомился с определенной информацией о знакомствах.

Какие переменные должны оставаться стабильными

Чтобы обеспечить равные условия, контролируйте как можно больше некреативных переменных, которые позволяет контролировать ваша тестовая конфигурация. На результаты повлияют изменения в предложении/пакете предложений, целевой странице/предварительной целевой странице, точке конверсии, структуре воронки, географическом регионе, категории устройств, целевой аудитории, типе размещения и модели атрибуции.

Некоторые тесты в реальных условиях могут не позволять контролировать все переменные. Динамика аукциона, динамика рекламного инвентаря, сами места размещения и состав аудитории могут изменяться в ходе проведения теста. Очень важно отслеживать эти изменения заранее, прежде чем интерпретировать результаты.

Простое практическое правило заключается в том, что любая переменная, которая может повлиять на поведение пользователей и изменяется между вариантами, должна быть учтена при интерпретации результатов. Таким образом, креатив не будет ни вознаграждён, ни наказан за то, на что влияет динамика воронки продаж, предложения или трафика.

Какие переменные креатива можно тестировать

Когда среда кампании относительно стабильна, определите креативную переменную, которую хотите изменить. Например:

• заголовок;
• основное изображение;
• иконка;
• CTA-сообщение;
• визуальный ракурс;
• длина текста.

Тестируемая переменная — это элемент, влияние которого нужно проанализировать.

Например, тестирование локализованного CTA не должно означать одновременное изменение изображения, заголовка, посадочной страницы и целевой аудитории.

Шаг 1: Создайте базовый вариант для тестирования креативов

Важность базового показателя в данном случае заключается в его надежности как сравнительного ориентира для любых тестов, которые могут проводиться в будущем, но не в том, что он будет постоянно меняться. Важно задокументировать все, что касается базового показателя — от Creative ID до используемого в нем языка и даже формата и условий проведения кампании, — чтобы в будущем можно было проводить сравнение с альтернативными вариантами.

Определите базовый креатив

Задокументируйте контрольный креатив до запуска вариантов. Минимум должен включать:

• основное сообщение или подход;
• заголовок;
• визуал или первый кадр;
• CTA;
• формат креатива;
• язык.

Контрольный вариант должен быть описан достаточно конкретно, чтобы человек, читающий журнал тестирования, мог воспроизвести то, что видели пользователи.

Не переименовывайте и не редактируйте контрольный вариант во время тестирования без создания новой версии.

Сохранять один и тот же контрольный вариант также проще для выявления усталости от креатива.

Определите гипотезу теста

Эффективная гипотеза объясняет процесс, а не то, что вы хотите доказать.

Примеры:

• Более локализованный призыв к действию может быть эффективным, поскольку использует язык, который лучше подходит конкретному GEO.
• Более понятные заголовки могут сократить число кликов с низким намерением и увеличить количество качественных конверсий.
• Более короткое push-уведомление может улучшить распознавание сообщения без изменения обещания на посадочной странице.
• Не формулируйте гипотезу как «Креатив B победит». Это не объясняет, что именно вы тестируете и что можете узнать из результата.

Используйте такую структуру:

Наблюдение, Гипотеза, Переменная, Метрика, Правило принятия решения

Создайте план тестирования креативов

Планируйте тестирование дейтинг-креативов до того, как начнет поступать трафик. Понятный план тестирования поможет избежать изменения критериев успеха на основе полученных результатов.

Test ID	GEO	Источник трафика	Устройство	Тестируемая переменная	Контроль	Вариант	Основная метрика	Дополнительные метрики
T-01	Одно выбранное GEO	Native	Mobile	Заголовок	H1	H2	CTR	CR, EPC
T-02	То же GEO	Native	Mobile	Визуал	V1	V2	CTR	CR, EPC
T-03	То же GEO	Push	Mobile	CTA	C1	C2	CR	CTR, EPC
T-04	Второе GEO	Тот же источник	Mobile	Локализация	L1	L2	CR	CTR, CPA

При смешанном трафике убедитесь, что правила маршрутизации и монетизации видны во время анализа. Руководство Adverten по дейтинг-Smartlink содержит информацию о том, как GEO, устройство, язык, офферы и их эффективность могут влиять на маршрутизацию трафика.

Шаг 2: Тестируйте дейтинг-креативы в разных GEO

При переводе изменения касаются используемого языка, однако локализация рекламы предполагает изменения в реализации, чтобы обеспечить соответствие сообщения местным условиям, в которых пользователь с ним сталкивается. Это может означать обеспечение согласованности используемого языка, призывов к действию (CTA), изображений, макета, а также способа передачи сообщения от рекламного материала к целевой странице. Цель состоит в том, чтобы сохранить исходную гипотезу, при этом обеспечив её релевантность для конкретного географического региона.

Отделяйте перевод от локализации рекламы

Хотя прямой перевод помог бы сохранить смысл, он может привести к потере эффективности рекламы. Перевод терминологии, связанной с сайтами знакомств, будет осуществляться с учетом тона, цели и подтекста используемого языка. Заголовок будет звучать естественно, в призыве к действию будут использоваться привычные фразы, а язык текста будет соответствовать целевой аудитории. При необходимости будут локализованы валюта, дата или местоположение, а язык целевой страницы и её сообщение будут согласованы.

Согласно общим рекомендациям по языку и интернационализации , сформулированным W3C, языковые настройки влияют на то, как контент будет отображаться и доставляться. Локализация кампании должна не только подразумевать перевод слов, но и обеспечивать естественное звучание кампании как на странице, так и за её пределами.

Определите, что должно оставаться неизменным в разных GEO

Сравнения между GEO имеют больше смысла, когда базовые условия эксперимента одинаковы. По возможности сохраняйте неизменными основной креативный концепт, цель конверсии, структуру воронки, тип оффера, формат креатива, определение метрик, атрибуцию и критерии принятия решения.

Локализуйте только то, что действительно требует локализации. Если в одном GEO используются два разных креативных концепта, визуала, воронки и CTA, такое сравнение может иметь операционную ценность, но уже не покажет, является ли конкретный креативный концепт универсальным.

Если оффер и/или воронка не могут оставаться одинаковыми во всех GEO, зафиксируйте это и сравнивайте результаты внутри каждого рынка, прежде чем проводить сравнения между GEO.

Создайте матрицу GEO-локализации

Используйте матричный подход, чтобы еще до начала эксперимента определить, что нужно контролировать, а что — изменять.

Элемент креатива	Оставить неизменным?	Локализовать?	Что проверить
Основной подход	Обычно	Иногда	Соответствует ли концепция аудитории и офферу?
Заголовок	Нет	Да	Естественность языка, тон, обещание
Визуал	Зависит	Зависит	Релевантность, понятность, ответственный таргетинг
CTA	Нет	Да	Привычная формулировка и конверсионное намерение
Формат	Обычно	Иногда	Требования источника и платформы
Сообщение на посадочной странице	Насколько возможно	Да	Последовательность сообщения и язык
Метки отслеживания	Да	Нет	Последовательная отчетность в разных GEO

Такой матричный подход помогает избежать непреднамеренного тестирования нескольких переменных одновременно.

Последовательное определение языка также важно для сайтов и посадочных страниц.

Сначала сравнивайте результаты внутри каждого GEO

Прежде чем делать общие выводы, следует рассмотреть каждый регион (GEO) в отдельности.

Логически это следует делать следующим образом:

1. Определить, что является контрольной группой в конкретном регионе;
2. Сравнить варианты в данном регионе;
3. Оценить CTR и другие показатели в данном регионе;
4. Определить оптимальный вариант для данного региона;
5. Повторить процесс для следующего региона;
6. Ищите закономерности на нескольких рынках;

Предположим, что визуальный элемент демонстрирует отличные результаты в двух странах, но с разными заголовками.

Именно поэтому руководство по географическим регионам не может заменить тестирование.

Шаг 3: Тестируйте дейтинг-креативы в разных источниках трафика

Этот раздел посвящен тестированию исполнения креатива, а не выбору источника дейтинг-трафика. Гайд Adverten по дейтинг-партнерским программам в зависимости от источника трафика рассматривает более широкий вопрос сопоставления подходящих источников трафика с подходящими партнерскими программами. В native исполнение зависит от связи между заголовком и используемым изображением. В push сообщение должно быть понятным за одну секунду. В display и social формат среды задает кадрирование, иерархию и первый кадр. Поскольку подача сообщения различается в этих средах, соответствующим образом адаптируйте исполнение креатива, но сохраняйте тот же вопрос теста для возможности сравнения.

Тестируйте native-креативы как сочетание заголовка и визуала

Поскольку native-плейсменты часто предполагают интеграцию заголовка и изображения в редакционную среду, тестирование этих двух элементов вместе, а не отдельно, может быть более реалистичным подходом.

• подход к заголовку;
• тема и композиция изображения;
• любопытство vs. ясность;
• соответствие редакционному контексту;
• согласованность сообщения с прелендингом/лендингом;
• контекст плейсмента.

Как указано в FTC Native Advertising Guide, «контекст, включая текст, визуальные элементы и формат, имеет критическое значение для определения общего впечатления». Для аффилиатов это важно не только с точки зрения соблюдения требований, но и для эффективности.

Тестируйте push-креативы на быстрое распознавание сообщения

Push-креативы должны передавать сообщение в очень ограниченном пространстве и за короткое время. Тест должен оценивать, может ли пользователь быстро понять сообщение без введения в заблуждение.

Переменные для тестирования могут включать:

• иконку или thumbnail;
• заголовки;
• основной текст;
• текст CTA;
• один четкий подход к сообщению;
• согласованность между уведомлением и посадочной страницей.

Согласно принципам FTC о достоверности рекламы, реклама должна быть правдивой, не вводить в заблуждение, иметь достаточное обоснование и не быть обманной. Учитывайте это правило при оценке креативов до тестирования, а не после того, как кампания покажет слабые результаты.

Тестируйте display- и social-креативы в рамках их собственных форматов

Вы можете использовать похожие материалы в display- и social-плейсментах, но нужно учитывать формат, в котором пользователь их видит. В таком случае сравнивайте статический и динамический контент, первый кадр или начало, иерархию, длину текста, соотношение сторон, видимость CTA и кадрирование в рамках плейсмента.

Было бы неправильно определять лучший креатив только по CTR, сравнивая короткое social-видео и display-баннер. Разный уровень контакта с рекламой и характер переходов могут влиять на этот показатель.

Если вы используете таргетинг в социальных сетях, необходимо также учитывать дополнительные законы о защите данных, в том числе касающиеся профилирования. Guidelines 8/2020 Европейского совета по защите данных рассматривают эту тему.

Отделяйте тесты источников трафика от GEO-тестов

Одновременное изменение GEO, источника трафика и креатива усложняет интерпретацию результата.

Используйте один из следующих порядков:

• То же GEO - Сравните разные креативы в одном источнике - Повторите для других источников.
• Тот же источник - Сравните локализованные креативы в одном GEO - Повторите для другого GEO.

Если объем трафика небольшой, начните с наиболее важного сегмента аудитории для вашей кампании, а затем переходите к другим.

Но это не означает, что каждый тест должен быть полностью изолированным.

Адаптируйте одну гипотезу креатива к нескольким источникам

Гипотезу можно формулировать по-разному, но ее суть может оставаться той же.

Источник трафика	Креативная единица	Переменные для тестирования	Контекст, который нужно контролировать	Основные метрики
Native	Заголовок + изображение	Заголовок, изображение, подход	GEO, посадочная страница, класс плейсмента	CTR, CR, EPC
Push	Иконка + короткое сообщение	Иконка, заголовок, CTA	GEO, устройство, условия отправки/плейсмента	CTR, CR, EPC
Display	Баннер или адаптивный блок	Визуал, текст, CTA	GEO, размер плейсмента, посадочная страница	CTR, CR, CPA
Social	Статический или видеоблок	Хук, кадр, текст, CTA	GEO, определение аудитории, плейсмент	CTR, CR, CPA
Content/referral	CTA или баннер в контенте	Сообщение, плейсмент, CTA	Намерение страницы, GEO, устройство	CTR, CR, доход за посещение

Например, если гипотеза звучит как «более релевантное сообщение может привлечь больше качественных кликов», сохраняйте основную гипотезу неизменной. При тестировании в native проверяйте ее через заголовок. При тестировании в push — через короткое сообщение. При тестировании в display — через основной текст.

Шаг 4: Оценивайте эффективность креативов не только по CTR

Рекламный материал может привлекать клики, не улучшая при этом эффективность кампании. Именно по этой причине показатель кликабельности нельзя рассматривать в отрыве от других показателей. Необходимо сопоставлять показатель кликабельности с коэффициентом конверсии, чтобы определить, приводят ли клики к конверсиям; с доходом за клик, чтобы оценить ценность каждого клика; а также с ценой за действие, коэффициентом одобрения и выручкой (если эти данные доступны). Именно благодаря этому подходу можно понять, удалось ли рекламному материалу привлечь внимание нужной аудитории.

Используйте CTR как сигнал вовлеченности

CTR измеряет конкретную проблему: каков был коэффициент кликов (CTR) из общего числа показов? CTR помогает определить, удалось ли рекламному объявлению привлечь внимание, но не дает ответа на вопрос, почему пользователь нажал на него и что произошло после этого клика.

Используйте CTR для определения:

• слабых или удачных «крючков»;
• сочетания изображений с заголовками;
• показателей отклика в зависимости от места размещения;
• снижения эффективности со временем;
• различий в эффективности между похожими рекламными материалами.

Однако не стоит использовать CTR исключительно для оценки того, какой рекламный материал будет прибыльным и привлечёт трафик.

Высокий CTR в сочетании с низкими показателями конверсии может свидетельствовать о проблемах с формулировкой текста, завышенных обещаниях, случайных кликах или неудовлетворительном пользовательском опыте после клика.

Связывайте каждый креатив с отслеживаемыми данными кампании

Хорошая система анализа кампаний позволяет отслеживать каждый вариант после клика. Описание Adverten того, как партнерская сеть связывает рекламодателя и паблишера , показывает, как tracking ID, параметры кампании, партнерские ссылки и postback позволяют сопоставлять клики с атрибутированными конверсиями. В зависимости от платформы и настроек трекинга фиксируйте:

• Идентификатор рекламного материала;
• Идентификатор кампании;
• географический регион;
• источник трафика;
• устройство или ОС;
• sub-source.

Инструменты Adverten для мониторинга эффективности Smartlink в реальном времени могут помочь с анализом креативов при условии, что параметры кампании передаются правильно.

Трекинг нужно настроить заранее. Если несколько креативов используют одно неразделенное название кампании, конверсии могут отображаться, но их нельзя будет привязать к конкретному варианту. Это создаст проблему в отчетности, которую не исправит дополнительный трафик.

Сравнивайте CTR, CR, EPC и CPA вместе

Ни одна отдельная метрика не может полностью определить эффективность креатива.

• CTR (click-through rate): показывает, какой процент показов превращается в клики.
• CR (conversion rate): показывает, какой процент единиц трафика конвертируется в соответствии с вашим определением конверсии.
• EPC (earnings per click): связывает клики с доходом и может помочь оценить эффективность монетизации.
• CPA (cost per action/acquisition): показывает стоимость привлечения для определенного действия, если вам известна стоимость медиа.
• Approval rate: показывает процент конверсий, подтвержденных рекламодателем или сетью, если этот показатель применим.
• Revenue: показывает фактически полученный доход, хотя его все равно нужно оценивать в связи с трафиком и расходами.

Используйте матрицу решений по эффективности креативов

Следующая матрица превращает метрики в вопросы для следующего теста. Она носит только диагностический характер и не является окончательным доказательством причинно-следственной связи.

Паттерн результата	Возможное объяснение	Что проверить	Следующее действие
Высокий CTR / низкий CR	Несоответствие между кликом и сообщением	Посадочная страница, аудитория, обещание	Согласовать сообщение и протестировать повторно
Низкий CTR / хороший CR	Слабый хук, но качественные клики	Заголовок, визуал, плейсмент	Протестировать более сильный хук без изменения обещания
Сильный результат в одном GEO	Разница в локализации или рыночном контексте	Язык, CTA, изображения, воронка	Создать локализованный вариант
Сильный результат только в одном источнике	Соответствие формату или плейсменту	Контекст источника, формат креатива	Адаптировать исполнение к другим источникам
CTR снижается со временем	Возможная усталость от креатива	Частота, плейсмент, насыщение аудитории	Ротировать или обновить вариант
Хорошие CTR и CR, слабая экономика	Проблема с расходами или выплатой	CPA, EPC, условия оффера, стоимость трафика	Пересмотреть экономику кампании

Шаг 5: Сравните результаты и определите, что тестировать повторно

Креативное тестирование представляет собой цикл, в рамках которого формулируется гипотеза, проводится её проверка, измеряются результаты, даётся их интерпретация, после чего цикл начинается заново. Правильным результатом считается тот, который помогает усовершенствовать будущие тесты, а не результат, полностью не связанный с предыдущим тестом. Если заголовок вызывает отклик, но все остальные элементы не соответствуют ожиданиям, то следующей гипотезой, которую необходимо проверить, должна быть гипотеза о согласованности сообщения, а не какой-либо другой аспект дизайна.

Меняйте по одной основной переменной за раз

Тесты, в которых изменяется только одна переменная, проще понять. К ним относятся:

• один и тот же креатив, разные заголовки;
• один и тот же креатив, разные визуальные элементы;
• один и тот же креатив, разные ракурсы;
• один и тот же креатив, разные форматы;
• один и тот же креатив, разные призывы к действию;
• один и тот же креатив, разная локализация.

Иногда имеет смысл провести комплексный тест, например, когда необходимо полностью переделать формат.

Это актуально, когда вы хотите применить знания, полученные в других географических регионах и из других источников.

Определите, когда тест собрал достаточно данных

Не существует четких критериев относительно того, сколько кликов должен набрать рекламный материал в ходе тестирования или как долго оно должно длиться.

Чем больше объем трафика, тем больше времени требуется для сбора необходимых данных. В то же время меньший объем трафика позволяет получить быстрые результаты. Однако трафик и местоположение рекламы могут влиять на результаты ваших экспериментов.

Следуя правилам проведения онлайн-экспериментов, при сравнении результатов следует учитывать размер выборки и их вариативность. Продолжайте тестирование дейтинг-креативов до тех пор, пока варианты не получат сопоставимый объем трафика.

Ведите журнал тестирования креативов

Журнал кампании превращает отдельные эксперименты во внутренние знания. Фиксируйте:

• гипотезу;
• даты начала/завершения;
• географический регион;
• источник;
• устройство;
• Creative ID.

Используйте одинаковые определения этих полей от одной кампании к другой.

Пример: сравните два креатива в двух сегментах

Пример ниже намеренно является качественным. Он показывает логику принятия решений и не является данными об эффективности Adverten.

Креатив	GEO	Источник трафика	Паттерн CTR	Паттерн CR	Паттерн EPC	Решение
A	GEO 1	Native	Выше локального контроля	Ниже локального контроля	Ниже	Проверить несоответствие между сообщением и посадочной страницей
B	GEO 1	Native	Похож на контроль	Выше	Выше	Оставить как локальный challenger
A	GEO 2	Native	Похож	Похож	Похож	Нет явного преимущества; повторно протестировать локализацию
B	GEO 2	Push	Нельзя сравнивать с native	Выше push-контроля	Выше	Проверить во втором push-плейсменте

Распространенные ошибки при тестировании дейтинг-креативов

Больший объем данных не всегда означает более качественные данные, особенно если трафик в наборе смешан так, что ключевые различия становятся незаметными. Native-трафик с мобильных устройств в одном GEO может радикально отличаться от display-трафика с десктопов в другом GEO, а объединение этих данных может сгладить как сильные, так и слабые результаты. Маркировка GEO, источника, устройства, Creative ID, плейсмента и воронки позволяет увидеть эти различия. Начинайте с сегмента достаточного размера, чтобы получить значимые данные, но детализируйте один параметр, если кажется, что именно он влияет на результат.

Тестирование слишком большого количества переменных одновременно

Это приведет к неопределенности в отношении конечного результата. Одним из таких сценариев может быть следующий:

• заголовок;
• Визуальный элемент;
• географический регион;
• источник;
• целевые страницы;
• аудитории;

В случае получения лучших результатов можно лишь сделать вывод, что данная комбинация показала хорошие результаты именно в этих условиях, но не определить, какая именно переменная способствовала успеху.

Это может привести к неэффективности будущих тестов.

Если скорость имеет решающее значение для тестирования концепции, рассматривайте его как отборочный тест.

Объединение GEO, устройств и источников в один результат

Агрегированные данные могут скрывать локальных победителей и проигравших. Креатив может отлично работать в mobile native-трафике из одного GEO и плохо работать в desktop display-трафике из другого, а итоговые средние значения нейтрализуют оба сигнала.

Как минимум включайте GEO, источник трафика, устройство и Creative ID в показатели отчетности; также добавляйте плейсмент/subsource, если объем данных позволяет дополнительную сегментацию. Больше сегментации не всегда лучше — слишком маленькие выборки могут быть настолько нестабильными, что не позволят принять решение.

Всегда начинайте достаточно широко, чтобы сохранить необходимый объем данных, а затем сужайте анализ до тех параметров, которые могут определять наблюдаемую эффективность. При этом следите и за агрегированным уровнем, чтобы видеть общую экономику кампании.

Выбор победителей только по CTR

Однако эта работа не сводится к одному клику.

Процесс выглядит следующим образом:

• показ, клик, целевая страница, конверсия, одобрение, деньги.
• Вариант может выиграть на первом этапе и проиграть на всех остальных.
• Используйте CTR для оценки интереса и убедитесь, что клик по-прежнему имеет смысл.

В качестве показателя оценки также учитывается соответствие требованиям. Реклама сервисов знакомств не должна обещать того, что не может подтвердить.

Копирование выигрышного креатива в другое GEO без локализации рекламы

Локальный победитель показывает только то, что сработало на рынке, где его тестировали, но это не означает, что то же исполнение следует переносить на все рынки.

Перед переносом исполнения в другое GEO оцените:

• сообщение заголовка;
• сообщение CTA;
• уместность визуала;
• сообщение, специфичное для рынка;
• сообщение на посадочной странице;
• доступность оффера.

Сохраняйте выигрышную идею и локализуйте ее исполнение.

Именно здесь пригодится хорошо задокументированный журнал кампании.

Не делайте предположений о чувствительных характеристиках потребителей в конкретном GEO.

Масштабирование победителя без повторного тестирования

Эффективность будет меняться, когда кампания выйдет за пределы исходного контекста. Повторно запускайте тесты после значительных изменений, таких как:

• новые плейсменты;
• расширение охвата аудитории;
• увеличение объема трафика;
• новая география;
• изменение распределения по устройствам;
• новый источник.

Креатив, который хорошо работает на ограниченном объеме, после масштабирования может попасть в другой инвентарь.

Не делайте вывод, что снижение эффективности вызвано тем, что креатив «больше не работает», не проверив сначала изменения в контексте трафика.

Так же не делайте вывод, что рост эффективности стал результатом оптимизации креатива.

Экспертные советы для более эффективного тестирования дейтинг-креативов

Постоянное тестирование и измерение делают историю ваших кампаний намного ценнее, поскольку дают вам единую систему координат. Вы должны иметь возможность идентифицировать такие переменные, как GEO, источник, формат, ракурс, вариант и дата, в процессе присвоения имен, а также уметь связывать эти имена с гипотезами и результатами. Важно, чтобы контрольные варианты работали достаточно долго, чтобы можно было определить, была ли разница обусловлена именно тестируемым вариантом или влиянием внешней среды.

Используйте последовательную систему названий креативов

Выберите формат названия, который показывает наиболее важные факторы теста. Подходящий формат может выглядеть так:

GEO_Source_Format_Angle_Variant_Date

Например, корректное название покажет, являются ли два креатива вариантами одного и того же подхода или полностью разными.

Хорошая система названий должна:

• быть достаточно короткой для чтения в отчетах;
• использовать одинаковые GEO-коды во всех кампаниях аккаунта;
• отдельно указывать источник и формат;
• показывать, какой креативный подход используется;
• указывать номер варианта;
• меняться, когда меняется креатив.

Точный формат менее важен, чем последовательность.

Если трекер содержит Creative ID, свяжите его с понятными человеку названиями в журнале кампании.

Сохраняйте контрольные варианты

Не всегда необходимо использовать новый вариант в качестве контроля, даже если изменение временное. Всегда придерживайтесь постоянной контрольной точки, пока не убедитесь, что это обосновано в определенных обстоятельствах.

Роль контроля может помочь определить:

• произошли ли изменения на рынке;
• снизилась ли эффективность всех рекламных материалов;
• связано ли это с улучшенной эффективностью нового варианта или с более качественным рекламным инвентарем;
• или остается ли «победитель» неизменным при увеличении объема трафика.

Всегда отмечайте, когда претендент становится новым эталоном для операционной деятельности.

Стройте тесты вокруг четких гипотез

Тестируйте каждый новый вариант по конкретной причине. Определите элемент, который хотите изменить, и результат, который оправдает это изменение.

Например, если локализованный трафик хорошо конвертируется, но получает мало кликов, сначала протестируйте заголовок. Оставьте визуал и CTA без изменений, но измените локальный заголовок и сравните его с текущим креативом.

Сначала проанализируйте CTR, чтобы понять, улучшили ли изменения кликабельность, но также оцените CR и EPC, чтобы убедиться, что дополнительные клики имеют ценность.

Это делает результаты более значимыми и помогает понять, что делать дальше. Либо продолжайте тестирование, если видите улучшение, либо переходите к другой переменной, если улучшения нет.

Повторно тестируйте после значительных изменений трафика

Повторно тестируйте креатив после серьезных изменений в трафике.

К факторам, которые могут потребовать такого теста, относятся:

• новое GEO;
• новый источник;
• увеличенный объем;
• новый класс плейсмента;
• новая целевая аудитория;
• новая структура устройств.

Не нужно воссоздавать кампанию с нуля каждый раз, когда возникает необходимость в повторном тестировании.

Превращайте результаты тестов во внутренние знания

Обязательно отслеживайте, что сработало, что нет и при каких условиях. Например, старайтесь понять, какие креативы для дейтинга работали лучше в определенных GEO, какие локализационные подходы оказались успешными и как эффективность креативов различалась в зависимости от источника трафика.

Это также упростит настройку будущих тестов, потому что вам не придется каждый раз начинать с нуля; вы сможете обратиться к предыдущему опыту и понять, что стоит попробовать снова, а что уже не сработало в похожих условиях.

Чем точнее ваши заметки, тем полезнее они будут. Знать результат для конкретного GEO, источника трафика, типа устройства, формата и воронки намного информативнее, чем видеть только среднее значение по аккаунту.

По мере накопления информации вам будет проще находить идеи для креативов и понимать, каких тестов стоит избегать.

Кейс тестирования дейтинг-креативов: иллюстративный сценарий

Рассмотрим аффилиата, который работает с мобильным дейтинг-трафиком в двух GEO и использует одну и ту же ключевую идею как в native-, так и в push-трафике. Это сделано намеренно, чтобы процесс тестирования оставался понятным: воронка не меняется внутри GEO, аффилиат не предполагает, что одно GEO или тип трафика эффективнее другого, а native CTR не рассматривается как сопоставимый с push CTR. На каждом этапе задаются более узкие вопросы, связанные с локализацией или сообщением, в зависимости от эффективности тестируемого варианта относительно его собственного контроля.

Исходные условия и цель тестирования

Начальная настройка намеренно проста:

• GEO: GEO 1 и GEO 2;
• устройство: mobile;
• источники: native и push;
• трафик: CPA дейтинг-трафик;
• исходный baseline: один концепт;
• воронка: стабильна для каждого GEO.

Аффилиат не делает предположений о том, какое GEO или источник сильнее. Он также не сравнивает native CTR с push CTR.

Однако первая гипотеза более конкретна: для каждого источника и GEO есть ли разница между локализованной версией концепта и его контрольным вариантом с точки зрения вовлеченности и эффективности?

Эту гипотезу можно проверить без установления универсального стандарта сравнения.

Настройка теста и переменные

Кампания использует поэтапный подход.

Этап 1: Native, GEO 1

• сохраняйте неизменными визуал, воронку, аудиторию и посадочную страницу;
• тестируйте локализацию заголовка;
• измеряйте CTR, CR и EPC.

Этап 2: Native, GEO 2

• тестируйте ту же гипотезу относительно локального контроля;
• не используйте «победителя» из GEO 1 без локализации.

Этап 3: Push-кампании

• сформулируйте ту же гипотезу для push-кампаний;
• тестируйте короткое сообщение без изменения сообщения на целевой странице;
• сравнивайте каждую версию push-кампании с ее собственным контролем на уровне источника.

Каждая версия получает собственный Creative ID.

Результаты и что менять дальше

Поскольку это только иллюстративный пример, результат показан в виде возможных дальнейших действий, а не вымышленных цифр.

Например, предположим, что локализованный native-заголовок показывает более высокие результаты по вовлеченности и конверсии, чем его локальный контроль в GEO 1. При этом в GEO 2 заметной разницы нет.

• сохранить локализованный заголовок GEO 1 как challenger;
• сохранить контрольный вариант GEO 2;
• протестировать другой параметр локализации в GEO 2, например формулировку CTA;
• повторить гипотезу сообщения в push в исполнении, адаптированном для push.

Чего этот кейс не доказывает

Этот кейс не доказывает, что локализация всегда работает, что один источник трафика лучше другого или что одна креативная стратегия работает для всех дейтинг-промо.

На фактические результаты, среди прочего, влияют следующие параметры:

• качество трафика;
• географический регион;
• устройство;
• место размещения;
• оффер;
• воронка.

Предыдущая эффективность не гарантирует будущих результатов.

Если таргетированная рекламная кампания регулируется или имеет чувствительный характер, проверьте соответствующие местные законы и правила. В ЕС Директива о недобросовестной коммерческой практике охватывает вводящие в заблуждение и агрессивные коммерческие практики, а таргетинг на основе данных может также создавать дополнительные обязательства.

Вывод: создайте систему тестирования вместо поиска одного креатива

Нельзя оценивать креативы для дейтинга изолированно. В одном GEO или источнике трафика дейтинг-креатив может работать иначе, чем на другом языке, с другой аудиторией, в другом плейсменте или структуре воронки.

Именно поэтому полезнее сначала оценивать дейтинг-креативы в максимально похожих условиях. Сделайте настройки кампании как можно более одинаковыми и меняйте только один ключевой элемент, чтобы увидеть влияние не только на CTR, но и на конверсии и метрики, связанные с доходом. Если креатив показывает эффективность, оцените его результаты после локализации или переноса в другой источник трафика.

Основная ценность тестирования заключается не в поиске одной рекламы, которая работает везде. Главная идея — определить, какие сообщения и форматы хорошо работают для определенных сегментов трафика, а какие требуют корректировки.

Всегда сохраняйте результаты предыдущих тестовых кампаний вместо того, чтобы каждый раз начинать с нуля. Даже если тест не дал очевидного результата, он может показать направление, которое уже не нужно повторять.

Аффилиатам, которые работают с несколькими GEO и/или источниками трафика, могут быть полезны Smartlink CPA-платформа Adverten для отслеживания эффективности трафика и гайд по Smartlink о распределении трафика между GEO, устройствами, языками и доступными офферами.

FAQ о тестировании дейтинг-креативов

Всегда ли новый креатив должен получать новый Creative ID?

Да, если в креативе что-то меняется и это может повлиять на эффективность. Новый заголовок, визуал, CTA, формат или локализация обычно должны получать новый Creative ID. Небольшие административные изменения, которые не меняют ничего видимого для пользователя, не обязательно нужно тестировать как отдельный вариант.

Что должно входить в отчет о тестировании креатива?

Включите дату и время теста, GEO, источник, устройство, Creative ID, тестируемую переменную, контроль, ключевые метрики, результат и следующее действие. Цель — собрать достаточно информации, чтобы помнить тест и проанализировать его позже без необходимости восстанавливать всю историю кампании.

Как Adverten помогает аффилиатам сравнивать результаты креативов?

Adverten предоставляет отслеживание кампаний и эффективности Smartlink, что может помочь сравнивать результаты тестов креативов при условии правильной настройки параметров и postback на платформе. Отслеживайте варианты, чтобы связывать клики, конверсии и последующие действия с соответствующими креативами.

Нужно ли сразу останавливать проигрывающий креатив?

Не обязательно. На ранние результаты могут влиять небольшой объем кликов, нестабильные плейсменты, задержанные конверсии или изменение качества трафика. Перед остановкой варианта оцените, накопил ли он достаточно сопоставимых данных.

Сколько вариантов следует тестировать одновременно?

Жесткого правила нет. Большее количество вариантов сильнее разделяет пул трафика, из-за чего результаты сложнее сравнивать. При этом, если тестировать слишком много вариантов одновременно, каждый из них может не получить достаточно трафика для принятия осмысленного решения.

Требует ли изменение посадочной страницы отдельного теста креатива?

Скорее всего, да, если изменение каким-либо образом может повлиять на конверсионное поведение. Иначе становится невозможно отделить влияние самого креатива от опыта после клика. Добавьте изменение посадочной страницы как условие нового теста.

Что делать с неоднозначным результатом при тестировании креативов?

Не пытайтесь искусственно определить результат. Оставьте контрольный вариант без изменений, оцените, повлияли ли на тест объем трафика или плейсменты, и определите, нужно ли повторно протестировать креативную идею. В тестировании рекламных креативов неоднозначный результат означает, что доказательств для масштабирования изменения недостаточно.

Можно ли применять один и тот же тест к рекламе в разных источниках дейтинг-трафика?

В принципе подход может быть одинаковым, но реализация будет различаться. Каждый источник дейтинг-трафика использует собственные форматы, плейсменты и уровень контекста для пользователя, поэтому тестируйте рекламу отдельно внутри каждого источника.

Когда локализация рекламы требует отдельного теста креатива?

Отдельный тест необходим каждый раз, когда меняется любой элемент рекламы, включая заголовок, CTA, изображение или формулировку. Это означает, что локализованную версию нужно рассматривать как тестовый вариант, чтобы оценить ценность локализации.

Что следует оценивать помимо CTR при анализе эффективности рекламного креатива?

Помимо CTR, по возможности оценивайте вовлеченность вместе с качеством конверсий, EPC, CPA, подтверждениями и доходом. Кроме того, аффилиатам следует повторно тестировать эффективность рекламных креативов после любых значительных изменений GEO, источника, плейсментов или объема трафика.