Скільки креативів тестувати за один раз
Найпоширеніша помилка — запустити десять креативів із бюджетом 50 доларів на кожен і сподіватися, що алгоритм сам знайде переможця. Так не працює. При малій кількості показів різниця в CTR і CVR між варіантами майже завжди потрапляє в шум. Ви отримуєте рейтинг, у якому перше і друге місця помінялися б місцями при повторному запуску.
Правило, яке ми використовуємо на старті кампанії: одночасно тестувати не більше п’яти креативів. Це число не взяте з повітря — воно дозволяє виділити на кожен варіант достатньо показів для первинного порівняння і при цьому не розпорошити бюджет. Якщо денний бюджет кампанії — 500 доларів, п’ять креативів отримують по 100 доларів на день. Цього достатньо, щоб через 2–3 дні побачити різницю в CTR і вартості за тисячу показів. Для висновків про CVR і вартість установки потрібно більше часу — зазвичай 4–7 днів залежно від обсягу трафіку.
Якщо бюджет менше 200 доларів на день, скорочуйте кількість варіантів до трьох. Краще отримати надійний сигнал по трьох креативах, ніж ненадійний по п’яти.
Що порівнювати на кожному етапі
Тестування креативу — це не один тест, а послідовність із трьох. Кожен відповідає на своє питання.
Перший тест — клікабельність. Показує, чи привертає креатив увагу в стрічці. Метрика: CTR. Поріг: на 30–40% вище за середнє по акаунту або по платформі. Креативи, які не пройшли цей поріг, відключаємо — немає сенсу платити за покази, які не перетворюються на кліки.
Другий тест — конверсія. Показує, чи доводить креатив глядача до цільової дії. Метрика: CVR після кліку. Тут важливо дивитися не лише на installs, а й на події всередині застосунку — реєстрацію, перший епізод, покупку. Креатив із високим CTR і низьким CVR часто означає, що обіцянка на креативі не відповідає тому, що користувач бачить після встановлення.
Третій тест — масштабованість. Показує, як креатив поводиться при збільшенні бюджету та аудиторії. Метрика: CAC при 3x і 5x від стартового бюджету. Креатив, який давав 2 долари за установку при 100 доларах на день, може скотитися до 6 доларів при 500. Це не означає, що він поганий — це означає, що його віддача обмежена.
Як розподілити бюджет між варіантами
Є два підходи, і обидва мають право на життя, але працюють у різних ситуаціях.
Рівний розподіл. Кожен креатив отримує однакову частку бюджету. Підходить, коли всі варіанти зроблені за одним брифом і ви не знаєте, який спрацює. Це найчистіший спосіб порівняння, оскільки алгоритм не встигає перерозподілити покази на користь одного варіанту.
Динамічний розподіл. Алгоритм платформи сам перерозподіляє бюджет на користь креативу з найкращим результатом за обраною метрикою. Підходить для другого і третього тесту, коли ви вже відсіяли явних невдах і хочете швидше знайти лідера. Але на самому першому тесті динамічний розподіл небезпечний: алгоритм може занадто рано зробити ставку на варіант, який випадково отримав пару дешевих установок у першу годину.
Наш підхід: перший тест — рівний розподіл, ручне відключення явних невдах через 48 годин. Другий тест — динамічний розподіл серед тих, що залишилися 2–3 варіантів. Третій тест — ручне керування бюджетом лідера з поступовим збільшенням.
Коли вбивати креатив
Відключати креативи важко, особливо якщо їх зробив хтось із команди. Але утримання слабкого креативу в активній кампанії — це прямий збиток: він забирає покази у сильніших варіантів і псує середній CAC.
Сигнали до відключення:
- CTR нижче 60% від лідера після 48 годин і 5000 показів.
- CPM вищий за середній по кампанії на 25% і не знижується.
- CVR після 100 кліків — нуль або вдвічі нижчий за лідера.
- Частота показів по цьому креативу вища за 3, а CTR падає від показу до показу.
Якщо креатив не проходить хоча б один із цих порогів, відключайте його. Не чекайте, поки він «розженеться». Креативи, які не показали результат у перші 48 годин при достатньому обсязі показів, майже ніколи не стають лідерами в масштабі.
Пастка раннього висновку
Найдорожча помилка — зробити висновок за даними першого дня. У перший день після запуску алгоритм платформи лише збирає дані про аудиторію. CPM нестабільний, покази можуть йти не тій аудиторії, яку ви планували. Креатив, який виглядає жахливо в перші 12 годин, може вийти в лідери на третій день.
Мінімальний строк для першого висновку — 48 годин і не менше 3000 показів на кожен креатив. Якщо показів менше, зачекайте ще. Якщо бюджет не дозволяє набрати 3000 показів за 48 годин, значить, ви тестуєте забагато варіантів або на занадто вузькій аудиторії.
Як читати різницю між CTR і CVR
Креатив із високим CTR і низьким CVR — це не поганий креатив. Це креатив із хибним обіцянкою. Він привертає кліки, але глядачі не знаходять того, чого очікували, і йдуть. Проблема не у візуалі, а в розриві між креативом і продуктом.
Рішення: перевірте, що саме ви показуєте в перші секунди після кліку. Якщо креатив обіцяє комедійний момент, а користувач потрапляє на екран реєстрації — розрив очевидний. Якщо креатив показує конкретного персонажа, а на посадковому екрані його немає — той самий ефект.
Креатив із низьким CTR і високим CVR — зазвичай нішовий креатив. Він привертає мало людей, але тих, хто клікає, конвертує добре. Такі креативи корисні для точкового таргетингу, але не підходять для масштабування. Залиште їх у кампанії як допоміжні, але не робіть на них ставку при зростанні бюджету.
Ідеальний креатив — середній CTR і високий CVR. Він не обов’язково виграє за клікабельністю, але приносить дешеві установки, оскільки глядачі, які клікають, доводять справу до кінця.
Скільки креативів потрібно в постійній ротації
Після завершення тестування та вибору 1–2 лідерів робота не закінчується. Креативи втомлюються — це факт, з яким нічого не поробиш. Втома проявляється в поступовому зростанні CPM і зниженні CTR при збільшенні частоти показів.
Здорова ротація для мобільної кампанії середнього масштабу — 3–5 активних креативів одночасно. Не один, бо алгоритм працює краще з вибором. Не десять, бо бюджет розпорошується. При цьому в запасі має бути ще 2–3 готових креативи, які запускаються, коли діючі починають показувати ознаки втоми.
Ознаки втоми: CTR падає на 15–20% від піку при тому ж обсязі показів, CPM зростає, частота перевищує 4. При появі двох із трьох — запускайте наступний креатив із запасу і поступово знижуйте бюджет на той, що втомлюється.
Що робити з креативами, які не пройшли тест
Не видаляйте їх. Креатив, який не спрацював на одній аудиторії, може спрацювати на іншій. Креатив, який не показав результат в одному гео, іноді працює на сусідньому ринку з іншим культурним контекстом.
Ми зберігаємо всі креативи з позначками: дата тесту, аудиторія, гео, результат, причина відключення. Раз на квартал переглядаємо архів і іноді знаходимо кандидатів для повторного тесту на новому ринку або в новому форматі розміщення. Близько 15% креативів, що провалили перший тест, отримують другий шанс — і приблизно третина з них вдруге працює.
Чек-ліст запуску креативного тесту
- Не більше п’яти креативів в одному тесті, три при бюджеті до 200 доларів на день
- Рівний розподіл бюджету на першому тесті, динамічний — на другому
- Мінімум 48 годин і 3000 показів на кожен варіант до перших висновків
- Відключайте креативи з CTR нижче 60% від лідера після 48 годин
- Перевіряйте відповідність креативу та посадкового екрана при розриві CTR і CVR
- Тримайте 3–5 активних креативів і 2–3 в запасі для заміни
- Архівуйте невдалі креативи з метаданими для повторного тесту на інших ринках
FAQ
Скільки днів має тривати тест креативу?
Мінімум 48 годин для висновків по CTR і 4–7 днів для висновків по CVR та вартості установки. Менший строк не дає статистично надійного сигналу.
Що робити, якщо всі п’ять креативів показують поганий результат?
Перевірте не креативи, а налаштування кампанії: аудиторію, розміщення, посадковий екран. Якщо всі варіанти однаково погані, проблема зазвичай не у візуалі.
Чи можна тестувати креативи на вузькій аудиторії?
Можна, але результат не перенесеться на масштаб. Вузька аудиторія дає дешевий сигнал для перевірки візуалу, але CAC при розширенні буде іншим.
Чи варто міняти креативи одночасно на всіх платформах?
Ні. Тестуйте на одній платформі, переносіть переможця на інші. Одночасна заміна всюди позбавляє вас точки порівняння.
Який CTR вважати хорошим для мобільного відео?
Залежить від гео, формату та платформи. Орієнтир: 1–2% для відео-вставок на розвинених ринках, 2–4% для rewarded-форматів. Порівнюйте не з абсолютом, а із середнім по своєму акаунту.
