EXPF: ответы на вопросы

Для свитчбэк-тестирования в геозонах (гексагонах и полигонах) временно́е окно переключения подбирается эмпирически через A/A тесты: размер считается подходящим, когда p-value незначим и принимается нулевая гипотеза. Окно закрепляется для каждого полигона индивидуально — от минуты до часа — и должно адаптироваться под плотность заказов и количество наблюдений. Продвинутые методы сплитования остаются редкими на рынке: по оценке спикеров, их применяют около 3 из 10 компаний, в основном из-за оффлайн-специфики, которая усложняет дизайн эксперимента.

• Подобрать окно свитчбэка через A/A тесты до незначимого p-value
• Адаптировать временное окно под плотность заказов и объём наблюдений
• Оценить долю рынка: продвинутые методы применяют около 30% компаний