Часть 2 Аналитика экспериментов: как измерить влияние эксперимента на продукт (Андрей Менде, Booking) Часть 2
В реальной работе продакт-менеджера редко бывает одна идеальная метрика, отражающая весь эффект изменения. Приходится балансировать между мощностью и точностью. Почти от всех проблем помогают прокси-метрики — их нужно статистически валидировать, чтобы они предсказывали долгосрочный успех. Для фокуса около 70% экспериментов должны влиять на метрику из OKR: это отсекает нерелевантные идеи уже на брейншторме. А ценнейший побочный продукт эксперимента — знание о клиентах, которым нужно активно делиться между командами.
- Найти и статистически валидировать прокси-метрики, предсказывающие долгосрочные цели
- Привязать бэклог к OKR: 70% экспериментов должны влиять на ключевую метрику
- Создать культуру обмена знаниями о клиентах между командами