Что меняется при росте до 1000 экспериментов в год: опыт Циана в изменении процессов (Артём Прокопенко, Циан)

При росте до 1000 экспериментов в год низковисящие фрукты собраны и нужно ужимать небольшие эффекты при минимальных затратах людей и инфраструктуры. Циан взял за основу модель Фабиано — маховик из четырёх стадий (ползти, идти, бежать, лететь) в трёх компонентах: инфраструктура, аналитика и процессы. Переход от stateless-сплиттера к stateful на фичи-флагах устранил ручную вычитку логов и некорректные данные. Внедрение языка разметки метрик MDL автоматизирует сборку витрин. Сейчас Циан на рубеже 3–4 уровней: роль аналитика сводится к дизайну тестов.

• Оценить зрелость платформы по модели Фабиано: инфраструктура, аналитика, процессы
• Сравнить stateless и stateful-сплиттеры на фичи-флагах для устранения ручной работы
• Применить язык разметки метрик MDL для автоматизации сборки витрин без аналитиков

Февраль 2025