Замораживай часть аудитории без экспериментов на начало квартала, чтобы в конце получить чистый срез эффекта от всех релизов.

Когда так бывает

не могу понять чистый эффект релизов из-за параллельных тестов

Где это показывают

• Выступление

  Техника безопасности при запуске крупной фичи: баланс между быстрыми метриками и прыжком веры (Алексей Сенников)

  Проверяем доступ

  «В начале каждого квартала нужно замораживать часть аудитории без экспериментов, чтобы в конце периода получить чистый срез с мультипликативным эффектом от всех релизов.»

  здесь это прозвучало

• Видео56 мин

  Как создать идеальный пользовательский опыт (Анна Булдакова, Facebook)

  Проверяем доступ

  «Используйте контрольные группы (holdout), чтобы долгосрочно отслеживать истинное влияние релизов на клиентский опыт.»

  здесь это прозвучало

• Видео22 мин

  Охват, конверсия или ретеншн? Выбор для максимального роста (Dan Olsen)

  Проверяем доступ

  «Чтобы увидеть реальную скорость оттока, нужно проанализировать поведение одной когорты пользователей, мысленно отключив приток всех новых регистраций.»

  здесь это прозвучало