Тестування креативів і аудиторій: як отримати висновок, якому можна вірити

Тест креативів і аудиторій — основна робота медіабаєра: саме тут знаходять зв’язки, які потім масштабують, і саме тут найбільше бюджету йде на вітер, якщо тестувати без методики.

Медіабаїнг9 хв читання
Тестування креативів і аудиторій: як отримати висновок, якому можна вірити
Зміст
  1. Навіщо медіабаєрові тестування креативів і аудиторій
  2. Гіпотеза перед тестом: що саме ви перевіряєте
  3. Структура тесту: одна змінна за раз
  4. Розмітка: як пов’язати креатив із грошима
  5. Скільки даних потрібно для висновку
  6. Вигорання креативів: коли час міняти
  7. Як вести тест креативів в ArtisanClo
  8. Приклад тесту аудиторій від початку до кінця
  9. Типові помилки під час тестування
  10. Підсумок

Добра новина: знайти робочий креатив і аудиторію — завдання ремісниче, а не містичне. Погана: без дисципліни навіть вдалий тест легко прочитати неправильно. Майданчик показує вам CTR і ціну кліку, партнерська мережа — ліди й апрув, а між ними боти, перевірки й випадковість. Нижче — методика, яка допомагає відокремити сигнал від шуму.

Будь-яка рекламна кампанія тримається на поєднанні трьох речей: кому показуємо, що показуємо і куди ведемо. Тест креативів і аудиторій відповідає на перші два питання. Третє — офер і прелендинг — перевіряють спліт-тестом оферів і лендингів.

Тести потрібні не лише на старті. Креативи вигорають, аудиторії насичуються, конкуренти змінюють ставки. Медіабаєр, який перестав тестувати, за місяць-другий виявляє, що прибуткова зв’язка тихо пішла в нуль. Уміння ставити такі тести — одна з головних навичок, якщо ви вирішили стати медіабаєром.

Гіпотеза перед тестом: що саме ви перевіряєте

Тест без гіпотези — це просто витрата грошей із надією на удачу. Перед запуском запишіть одним реченням:

  • що змінюєте — подачу, формат, аудиторію, гео, плейсмент;
  • чого очікуєте — наприклад, зростання CTR чи зниження ціни ліда;
  • за якою метрикою вирішуєте — і який мінімум даних потрібен для висновку.

Приклад формулювання: «Відео з демонстрацією продукту дасть вищий CTR, ніж статична картинка з текстом, на тій самій аудиторії. Порівнюю за CTR і ціною ліда після того, як кожен варіант набере однакову кількість показів».

Що тестувати в креативах

Змінна Приклади варіантів
Кут подачі Вигода, розв’язання проблеми, соціальний доказ, цікавість
Формат Статична картинка, відео, карусель, короткий вертикальний ролик
Перший кадр чи заголовок Запитання, твердження, цифра, звернення до аудиторії
Візуальний стиль Контент «на телефон», студійний, ілюстрація
Заклик до дії «Дізнатися більше», «Пройти тест», «Отримати пропозицію»

Креативи зобов’язані відповідати правилам майданчика: жодних неправдивих обіцянок, оманливих «до/після» й вигаданих відгуків. Докладно про те, як робити креативи, що чесно проходять модерацію, — у статті про креативи за правилами.

Що тестувати в аудиторіях

  • Гео — країни й регіони з різною купівельною спроможністю. Як влаштований поділ країн — у статті про гео й тири.
  • Демографія — вік і стать, якщо майданчик їх дає і правила дозволяють це для вашої категорії.
  • Інтереси й поведінка — вузькі сегменти проти широкого таргету.
  • Схожі аудиторії — на основі ваших конверсій, якщо вони вже є.
  • Пристрої й ОС — мобільний трафік і десктоп часто конвертуються по-різному.
  • Час показу — деякі офери конвертують у певні години, коли працює кол-центр рекламодавця.

Структура тесту: одна змінна за раз

Головне правило — змінюйте одну річ. Якщо в одному тесті відрізняються і креатив, і аудиторія, і офер, ви не дізнаєтеся, що спрацювало.

Практична схема для тесту креативів:

  1. Одна кампанія, одна аудиторія, одне гео.
  2. Кожен креатив — в окремій групі оголошень з однаковим бюджетом, якщо вам потрібне чесне порівняння. Якщо готові довіритися оптимізації майданчика — усі креативи в одній групі, але пам’ятайте, що алгоритм рано вибере фаворита.
  3. Однакові ставки й розклад.
  4. Посилання з мітками, у яких зашито ідентифікатор креативу.

Для тесту аудиторій — навпаки: один-два перевірені креативи й різні групи під різні аудиторії.

Порада. Називайте кампанії та групи за шаблоном: дата, гео, аудиторія, креатив. За місяць «Test 3 copy copy» у звітах нічого вам не скаже.

Розмітка: як пов’язати креатив із грошима

Кабінет майданчика бачить кліки й іноді конверсії свого пікселя. Партнерська мережа бачить ліди й апрув. Щоб зрозуміти, який креатив приніс гроші, а не просто кліки, ідентифікатор креативу має дійти до трекера й зберегтися в кліку.

Це роблять макросами майданчика в рекламному посиланні. Умовний приклад:

https://example.com/?sub1={campaign_id}&sub2={adset_id}&sub3={ad_id}&sub4={placement}

Назви макросів у кожного майданчика свої. Докладніше — у статті про UTM-мітки й макроси і в матеріалі про click ID і Sub ID. Коли партнерська мережа підтверджує лід постбеком, трекер знаходить клік і записує дохід на той креатив, який був у мітці.

Скільки даних потрібно для висновку

Найпоширеніша помилка — вирішити за першими десятьма кліками. Мала вибірка дає випадковий результат, і він може вказати в будь-який бік.

Орієнтири залежать від метрики:

Метрика рішення Коли даних достатньо
CTR Тисячі показів на варіант; CTR стабілізується найшвидше
Ціна кліку Після виходу групи з фази навчання майданчика
CR і ціна ліда Десятки конверсій на варіант, а не одиниці
ROI Лише після підтвердження лідів партнерською мережею

Приклад для ілюстрації: креатив А дав 3 ліди зі 150 кліків, креатив Б — 1 лід зі 140 кліків. Здається, що А втричі кращий. Але різниця у два ліди — це шум: завтра співвідношення може перевернутися. Щоб порівнювати CR, потрібно хоча б кілька десятків конверсій на кожен варіант. Якщо бюджет цього не дозволяє, порівнюйте за метриками ближче до початку воронки — CTR і ціною кліку, — а за CR робіть лише попередній висновок.

Зважайте на апрув і холд

Ліди надходять одразу, а підтвердження партнерської мережі — за години чи дні. Креатив, що дає дешеві ліди, може приводити людей, які не беруть слухавку або не проходять перевірку. Порівнюйте варіанти за підтвердженим доходом, щойно він доступний. Про статуси — у статті про статуси конверсій.

Відокремлюйте ботів від людей

Якщо в одну групу оголошень іде багато бот-трафіку, її CTR може виглядати чудово, а конверсій не буде. Боти, перевірки майданчика й скликування спотворюють тест, особливо на push, pop і нативних джерелах. Як розпізнати такий трафік — у розборі ознак бот-трафіку.

Тести на різних майданчиках

Методика одна, але деталі залежать від джерела трафіку. У соцмережах із машинною оптимізацією важливо дати групам вийти з фази навчання й не змінювати їх на ходу. На push, pop і нативних джерелах тестують ще й майданчики всередині мережі: та сама реклама на різних сайтах-партнерах дає зовсім різний результат, і сміттєві майданчики відключають за звітом. У пошуку головна змінна — ключові слова й тексти оголошень, а не візуал.

Вигорання креативів: коли час міняти

Креатив не живе вічно. Ознаки вигорання:

  • CTR повільно, але стабільно знижується кілька днів поспіль;
  • частота показів одній людині зростає;
  • ціна кліку росте за тієї самої ставки;
  • CR падає, хоча офер і лендинг не змінювалися.

Найкраща стратегія — тримати в запасі варіації робочого креативу: інший перший кадр, інший колір, інший заголовок на тій самій ідеї. Нова ідея — це новий тест; варіація робочої ідеї — дешевий спосіб продовжити життя зв’язки.

Як вести тест креативів в ArtisanClo

В ArtisanClo тест зручно будувати на мітках потоку. Кількість міток SubID тарифом не обмежена, тож у посиланні можна одночасно розмітити креатив, групу, аудиторію, плейсмент і баєра.

  • У Звітах таблиця «Гроші за зрізами» показує кліки, конверсії, CR, дохід, витрати, прибуток і ROI за мітками sub1–sub10, а також за країною, пристроєм, джерелом і офером.
  • Конструктор звітів будує дерево з групуванням за рівнями, наприклад «країна → мітка креативу»; у ньому доступні мітки починаючи з sub11 і параметри посилання джерела. Звіт можна зберегти й завантажити в CSV.
  • У Статистиці видно, яку частку кліків відсіяно як боти й перевірки, а також розрізи за гео, пристроями, браузерами й провайдерами — це допомагає зрозуміти, чи не перекошений тест сміттєвим трафіком.
  • Гілки (з тарифу Professional, у режимах із трекером) спрямовують різних відвідувачів на різні офери за країною, пристроєм, параметром посилання чи міткою кампанії — так одне рекламне посилання можна використовувати для кількох аудиторій.

Якщо ви працюєте в режимі «Клоакінг» разом із зовнішнім трекером — Keitaro, Binom чи іншим, — CR і дохід теж з’являться в статистиці після налаштування приймання конверсій. Докладніше про функції — на сторінці можливостей.

Приклад тесту аудиторій від початку до кінця

Цифри в прикладі — ілюстрація, а не норма для будь-якого офера.

Завдання. Є креатив, який уже приносив ліди на широкій аудиторії. Треба зрозуміти, яка аудиторія дає найдешевшу підтверджену заявку.

Гіпотеза. Аудиторія за інтересами до теми офера дасть нижчу ціну підтвердженої заявки, ніж широкий таргет і схожа аудиторія.

Структура. Три групи оголошень: широка аудиторія, інтереси, схожа аудиторія. Той самий креатив, однаковий денний бюджет, однаковий розклад. У мітці sub2 — назва аудиторії, у sub3 — ідентифікатор креативу.

Поріг. Кожна група витрачає не більше двох виплат без ліда; підсумкове порівняння — після того, як партнерська мережа підтвердить заявки.

Результат за тиждень.

Аудиторія Кліки Ліди Апрув Ціна підтвердженої заявки
Широка 1 400 21 52% нижча за середню
Інтереси 1 100 19 32% вища за середню
Схожа 1 250 17 65% найнижча

За лідами найкраща широка аудиторія. За грошима — схожа: заявок менше, але підтверджується більше. Аудиторія за інтересами дає багато лідів із низьким апрувом — імовірно, людей цікавить тема, але купувати вони не готові. Якби баєр зупинився на кількості лідів, він масштабував би не ту групу.

Наступний крок. На схожій аудиторії запускають тест креативів: дві-три варіації робочої ідеї проти початкового креативу.

Як фіксувати результати тестів

Заведіть просту таблицю тестів: дата, гіпотеза, що змінювали, бюджет, результат, висновок. За місяць вона перетворюється на базу знань: ви бачите, які кути подачі працюють у вашій вертикалі, які аудиторії стабільно дають апрув і які ідеї не варто повторювати. У команді така таблиця заощаджує гроші всім баєрам, а не лише авторові тесту.

Типові помилки під час тестування

  • Тест без ліміту. Перед запуском вирішіть, скільки готові витратити і що вважатимете «провалом». Про те, як задати суму й критерії зупинки, — у статті про бюджет і ставки.
  • Різні умови для варіантів. Один креатив запустили вранці, інший увечері — і ви порівнюєте час доби.
  • Зупинка на піку. Варіант, що вирвався вперед у перші години, часто «відкочується» до середнього.
  • Забагато варіантів. Бюджет розмазується, і жоден варіант не набирає даних.
  • Висновки без запису. Неописаний тест потім доводиться повторювати.

Підсумок

Тест креативів і аудиторій — це керований експеримент: гіпотеза, одна змінна, рівні умови, розмітка аж до креативу, заздалегідь заданий бюджет і поріг даних. Порівнюйте варіанти за грошима, а не за кліками, зважайте на апрув і не забувайте про ботів. Знайдену зв’язку не треба одразу заливати бюджетом — спершу переконайтеся, що вона стабільна, а вже потім переходьте до масштабування кампаній.

Часті запитання

01

Скільки креативів тестувати одночасно?

Стільки, щоб кожному дісталося достатньо показів за вашого бюджету. Якщо бюджет на тест невеликий, три-п’ять креативів краще, ніж п’ятнадцять: коли варіантів багато, жоден не набере статистики, і майданчик сам вибере фаворита за першими випадковими кліками.

02

Що тестувати першим: креатив чи аудиторію?

Зазвичай спершу аудиторію та гео на одному-двох перевірених креативах, потім креативи на знайденій аудиторії. Аудиторія сильніше впливає на ціну й конверсію, а креатив частіше допомагає покращити вже робочу зв’язку.

03

Чому креатив перестав працювати за тиждень?

Це вигорання: аудиторія вже бачила оголошення, частота показів зростає, CTR падає, а ціна кліку росте. Рішення — заздалегідь тримати в запасі нові варіанти на тій самій ідеї й міняти їх до того, як зв’язка піде в мінус.

04

Чи можна довіряти оптимізації майданчика під час тесту креативів?

Частково. Алгоритм швидко віддає покази варіанту, який сподобався йому за першими даними, і решта креативів може так і не отримати шансу. Якщо потрібне чесне порівняння, розносьте варіанти по окремих групах оголошень із рівним бюджетом.

05

Як зрозуміти, що тест завершено?

Коли досягнуто заздалегідь заданого порогу: витрачено бюджет тесту або набрано потрібну кількість кліків і конверсій на варіант. Якщо поріг не досягнуто, висновок передчасний, навіть якщо різниця здається великою.

Читайте також

9 хв читання

Бюджет і ставки: скільки витрачати на тест і коли вимикати кампанію

Бюджет на тест — це не сума, яку не шкода втратити, а ціна відповіді на питання «чи працює зв’язка»; медіабаєр рахує її заздалегідь і заздалегідь вирішує, за яких цифр кампанію буде зупинено.

9 хв читання

Масштабування рекламних кампаній: як рости і не втратити прибуток

Масштабування реклами — це збільшення обсягу прибуткової зв’язки так, щоб ROI не провалився; медіабаєр нарощує бюджет вертикально, розширює охоплення горизонтально і перевіряє кожну зміну грошима.

9 хв читання

Гео в арбітражі трафіку: Tier-1, Tier-2, Tier-3 і як обрати країну

Гео в арбітражі — це країна чи регіон, куди ви ллєте трафік; країни умовно ділять на Tier-1, Tier-2 і Tier-3 за платоспроможністю аудиторії, ціною трафіку й виплатами, і від вибору гео залежить уся економіка зв’язки.

Перевірте свій трафік на ділі

Підключіть ArtisanClo до свого сайту — і побачите, хто насправді приходить із реклами та чому кожен клік отримав саме таке рішення.