Дизайн growth-экспериментов (Алексей Кузнецов, App in the Air)

Проверка продуктовых гипотез часто страдает от нечётких критериев и пропущенных оценок. Подход через карточку эксперимента强制 фиксировать пять ключевых пунктов: постановку задачи, целевые метрики, критерии успеха, оценку усилий и следующие шаги. На примере App in the Air — запуск более дешёвой подписки с рекламой для компенсации падения конверсии в платную подписку. Допустимый порог — возврат к докризисной конверсии при падении выручки не более 20%. Срок тестирования считается через стандартные калькуляторы выборки: текущая конверсия, желаемая и объём трафика дают примерно две недели.

• Собрать карточку эксперимента: задача, метрики, критерии успеха, усилия, следующие шаги
• Посчитать сроки теста через калькулятор выборки по текущей и желаемой конверсии
• Разобрать результаты после завершения, чтобы извлечь выводы из ошибок и сомнений