Метрики экспериментов и A/B-тесты

9 материалов · 1 ч 20 мин

A/B тесты — самый распространенный, но при этом не самый простой способ проверки гипотез. Это долго, если респондентов мало. Это дорого, если респондентов больше. Это долго и дорого, если нужно повысить чувствительность теста и провести дополнительные исследования. Какие лайфхаки применить, чтобы получить драматическое увеличение скорости и точности проверки гипотез без радикального повышения затрат, рассказали эксперты из Unitedinvestors.ru , Verv, Booking.com и X5 Retail Group. — Как проводить A/B тесты на малом объёме данных Александр Горный, сооснователь Unitedinvestors.ru — Как изменили процесс А/B тестирования и увеличили эффективность в 5 раз Виктория Бабаева, Product Analytics Team Lead в Verv — Не-А/B тестирование (тестирование переплетением) Андрей Менде, Product Owner в Booking.com — Ускорение A/B тестов с помощью линеаризации Валерий Бабушкин, Director of Data Science в X5 Retail Group Ноябрь 2020