Как фильтровать гипотезы перед тестированием?
Время — ограниченный ресурс, и проверить все гипотезы не получится никак. Нужно выделить самые важные и браться за те, что имеют самый высокий приоритет.
Критерии приоритезации:
1. ICE (Impact, Confidence, Ease):
- Impact (влияние): Насколько сильно повлияет на метрику?
- Confidence (уверенность): Насколько уверены, что повлияет?
- Ease (простота): Насколько просто реализовать?
Каждую гипотезу нужно оценить по трём критериям и перемножить оценки между собой. Так ты получишь очки, по которым можно ранжировать гипотезы. Чем больше очков — тем выше приоритет.
Формула: (I × C × E), где всё по шкале от 1 до 10.
2. RICE (Reach, Impact, Confidence, Effort):
- Reach (охват): Какое количество пользователей гипотеза затронет? (Оценка в количестве пользователей)
- Impact (влияние): Какое влияние окажет на продукт? (Оценка в баллах. Например, от 0 до 3, где 3 — самое сильное влияние)
- Confidence (уверенность): Насколько мы уверены в успехе? (Оценка в процентах от 0 до 1, где 1 — это 100% уверенности в успехе)
- Effort (усилия): Сколько времени уйдёт на реализацию? (Оценка в месяцах или неделях)
Формула: (Reach x Impact x Confidence) / Effort
3. Ориентирование на воронку:
Приоритизация гипотез на основе того, на какой шаг воронки она влияет. Чем ближе к первому шагу — тем важнее гипотеза.
4. Ориентирование на стадии продукта:
Если работаешь над новым продуктом, то в первую очередь нужно тестировать гипотезы, ориентированные на рост пользователей и конверсий. А если продукт уже зрелый, то важнее будут гипотезы, нацеленные на рост LTV (сколько денег приносит пользователь за «срок жизни») и ретеншена (возвращаемость в продукт).
5. Стратегическое соответствие:
Соответствует ли гипотеза целям квартала или стратегии? Важнее то, что соотносится со стратегией. Самый сомнительный вариант, на мой взгляд, но имеет место быть.