Сформулюйте перевірюване припущення
Гіпотеза має пояснювати, яка зміна повинна вплинути на результат і чому — наприклад демонстрація використання товару зменшить ціну покупки, бо зніме сумнів щодо складності
Фраза протестувати нові креативи занадто широка, бо після запуску буде незрозуміло, що саме спрацювало й який висновок переносити в наступні кампанії
- Сегмент аудиторії
- Проблема або мотивація
- Запропонована зміна
- Очікуваний ефект
- Бізнес-метрика
Змінюйте одну ключову змінну
Якщо одночасно змінити аудиторію, офер, формат і посадкову сторінку, навіть сильний результат не покаже, який елемент варто повторити
Контрольований тест залишає основні умови однаковими й змінює лише фактор, заради якого сформульована гіпотеза
- Офер
- Креативний кут
- Формат
- Аудиторія
- Посадкова сторінка
Визначте критерій до запуску
До старту зафіксуйте основну метрику, мінімальний обсяг даних, допустиму ціну результату та максимальний бюджет тесту
Це захищає від емоційного рішення залишити улюблений креатив або зупинити кампанію після кількох випадкових дорогих днів
- Основна конверсія
- Допоміжні сигнали
- Мінімум результатів
- Термін тесту
- Умова зупинки
Перетворюйте результат на систему знань
Після тесту запишіть не лише цифри, а й контекст — сезон, аудиторію, плейсменти, зміни на сайті та якість опрацювання заявок
Переможець стає новим контрольним варіантом, а наступна гіпотеза повинна розвивати отриманий висновок, а не починати процес із нуля
- Що перевіряли
- Що отримали
- Чому так могло статися
- Що впроваджуємо
- Що тестуємо далі
Короткі відповіді
Скільки гіпотез тестувати одночасно+
Стільки, скільки дозволяє бюджет зібрати достатні дані для кожної без змішування ключових змінних
Коли тест можна завершити+
Коли досягнуто заздалегідь визначений обсяг даних або спрацювала умова зупинки за бюджетом чи якістю
Що робити з гіпотезою, яка не спрацювала+
Зафіксувати контекст і висновок, щоб не повторювати той самий тест без нової причини або зміни умов