Когда использовать
Когда есть метрика, которую хочется поднять (конверсия лендинга, открытия писем, регистрации), и нужно решить, что тестировать в первую очередь. Роль — growth-аналитик. Результат: гипотезы в формате «если … то … потому что …», с метрикой, приоритетом ICE и дизайном теста.
Промт (бери и вставляй)
Ты — growth-аналитик, который мыслит гипотезами, а не «давай поменяем цвет». Рассуждай по шагам.
ЧТО УЛУЧШАЕМ: «<метрика и где: напр. конверсия лендинга в заявку>». ТЕКУЩЕЕ ЗНАЧЕНИЕ: <если знаю>. ТРАФИК/ОБЪЁМ: <сколько человек/событий в неделю>.
ЧТО ИЗВЕСТНО О ПРОБЛЕМЕ: «<данные, жалобы, где отваливаются, гипотезы>».
Сделай:
1. Назови вероятные причины, почему метрика низкая (по воронке, по шагам).
2. Сформулируй 5–7 гипотез в виде «Если <изменим X>, то <метрика↑>, потому что <причина>».
3. Для каждой — что именно меняем (вариант B), какую метрику смотрим, ожидаемый эффект.
4. Приоритизируй по ICE (Impact 1–10 · Confidence 1–10 · Ease 1–10), посчитай балл, отсортируй.
5. Топ-1 распиши как тест: что A / что B, целевая метрика, на каком объёме и сколько ждать (хватит ли трафика для значимости).
Если трафика мало для A/B — честно скажи и предложи альтернативу (последовательный тест, качественные интервью).
Пример заполнения
Улучшаем: конверсию лендинга в заявку. Текущее: 2%. Трафик: ~500 визитов/нед. Известно: на первом экране много текста, форма из 7 полей, нет отзывов.
Ожидаемый ответ ИИ: причины по воронке; гипотезы — «Если сократим форму с 7 до 3 полей, то конверсия↑, потому что длинная форма отпугивает»; «Если добавим 3 отзыва, то↑ из-за доверия»; «Если перепишем первый экран в одну выгоду — ↑»; и т.д. У каждой — метрика и эффект; таблица ICE с баллами; топ-1 (короткая форма) расписан как тест. Важно: при 500 визитах/нед и базе 2% честное предупреждение — на заметный эффект нужно несколько недель, мелкие изменения статзначимо не поймать, начните с самого сильного.
Вариации
- Только быстрые победы. «Отсортируй по Ease — что можно протестировать без разработки на этой неделе».
- Дизайн эксперимента. «Посчитай нужный размер выборки и длительность для эффекта +X%».
- Разбор проигравшего теста. «Тест не дал эффекта — почему и что проверить дальше».
Про-советы
- Гипотеза без «потому что» — это не гипотеза, а тык наугад. Формат «если/то/потому что» заставляет опереться на причину, а не на вкус.
- Реализм по трафику критичен: на малом объёме A/B статзначимо не поймать мелочь. ИИ должен честно сказать «не хватит» и предложить тестировать только сильные изменения или идти в качественные интервью.
- ICE — для приоритета, а не истина: оценки субъективны. Ценность — отсортировать и начать с верха, а не тестировать всё подряд месяцами.