К содержимому

Как Samokat.tech попытались быстрее возить заказы (Илья Лоладзе, Samokat.Tech)

В Samokat аналитики решили проверить расширение радиуса экспресс-доставки со SLA 15 минут для части адресов. Гипотеза появилась без предварительных исследований, поэтому команду ждала проблема выбора: смотреть на 10-20 метрик и рисковать поймать ошибку первого рода или отобрать одну. Чтобы отфильтровать метрики до запуска, использовали исторические данные и переводили ожидаемый эффект в потенциальную финансовую выгоду. Выбрав частоту заказов, запустили A/B-тест на 50 дарксторах. Частота не выросла, а уровень опозданий резко подскочил: опытные курьеры игнорировали изменения из-за привычки и продолжали возить по старым зонам.

  • Выбрать одну главную метрику через оценку экономического эффекта на исторических данных
  • Синхронизироваться с операционным бизнесом до запуска, чтобы не сломать чистоту теста
  • Генерировать гипотезы, беря устоявшийся параметр процесса и задавая вопрос «что если»

Декабрь 2023