Короткие практические записи о продуктовой работе: метрики, гипотезы, исследования и приоритизация. Без теории ради теории.
Сначала определение метрики, потом цель
Большая часть споров о росте на самом деле споры о том, что именно считаем. Прежде чем ставить цель, стоит записать для метрики:
числитель и знаменатель и как они агрегируются по неделям и кварталам;
какие поверхности и события входят, а какие нет;
окно атрибуции;
известные сломы ряда — даты, после которых периоды нельзя сравнивать напрямую.
Если ряд «упал» сразу после смены логирования, это не падение качества, а смена линейки.
Карточка гипотезы в пять строк
Гипотеза, которую нельзя опровергнуть, — это пожелание. Рабочий минимум:
что меняем и для кого;
какое поведение ожидаем увидеть;
какую метрику это сдвинет и на сколько, чтобы изменение было значимым для бизнеса;
как поймём, что гипотеза не подтвердилась;
сколько стоит проверка и что будем делать при любом исходе.
Сегменты: размер важнее эффектности
Самый яркий провал конверсии часто живёт в группе, где несколько сотен пользователей. Рядом с любым срезом показывайте размер сегмента и его долю в итоговой метрике — иначе команда потратит квартал на то, что не сдвинет общий результат.
Интервью с пользователями без наводящих вопросов
Спрашивайте о прошлом поведении, а не о будущих намерениях. «Расскажите, как вы в последний раз…» даёт факты; «Пользовались бы вы…» даёт вежливое «да». После пяти-семи интервью в одном сегменте новые темы обычно перестают появляться — это хороший момент остановиться и разложить находки.
Приоритизация — это отказ
Фреймворки вроде RICE полезны не числом на выходе, а тем, что заставляют проговорить допущения: откуда охват, почему такая уверенность, кто оценивал трудозатраты. Если два пункта отличаются на десять процентов, честнее признать, что они равны, и решать по стратегии.