8 материалов · приём действия · Разобраться в своих цифрах
Выступление«До запуска A/B-теста определяйте «красные флаги» — максимально допустимую просадку метрик в рублях или процентах, при которой тест принудительно останавливается.»
здесь это прозвучало
Эфир«Прежде чем запускать тест на оптимизацию расходов, нужно рассчитать допустимую просадку ключевой метрики, при которой экономия всё ещё перекрывает потери от падения конверсии.»
здесь это прозвучало
Видео13 мин«При тестировании гипотез с высоким риском оттока необходимо заранее определять пороговые значения метрик риска (таких как bounce, retention или обращения в саппорт), при достижении которых эксперимент немедленно останавливается.»
здесь это прозвучало
Видео34 мин«До старта A/B-теста фиксируйте не только целевые метрики, которые хотите поднять, но и барьерные — показатели, которые категорически нельзя просаживать (например, скорость загрузки или монетизация).»
здесь это прозвучало
Урок7 мин«Ежедневный мониторинг эксперимента через дашборды нужен в первую очередь для отлова багов и аномалий, а не для промежуточных выводов.»
здесь это прозвучало
Видео54 мин«Для каждой маркетинговой связки нужно заранее определить метрики и критерии: когда её остановить, когда масштабировать, а когда переделать.»
здесь это прозвучало
Видео18 мин«Любую ML-модель, генерирующую автоматические жалобы, нужно внедрять с возможностью мгновенно отключить её при наплыве нерелевантных срабатываний.»
здесь это прозвучало
Видео6 мин«Если эксперимент связан с изменением цен (прайсингом) или деньгами, за метриками нужно следить и делать чекапы каждые 3-7 дней, прерывая правило «не подглядывать».»
здесь это прозвучало
