Обновить
4
0
Полина Ревина@previna

Пользователь

Отправить сообщение

Как оценить валидность A/B-тестов. SRM и другие критерии

Уровень сложностиСредний
Время на прочтение8 мин
Охват и читатели3.1K

Привет! Меня зовут Полина, я руковожу A/B‑платформой в СберМаркете. В этой статье я расскажу о нескольких нюансах экспериментирования, которые возникают на разных этапах — от дизайна и сплитования до подведения итогов. Если их не учитывать, нам приходиться с осторожностью относиться к результатам или вовсе проводить эксперимент заново. К ним относятся Sample Ratio Mismatch, корректное пересечение тестов, взаимодействие нескольких экспериментальных механик и другое. Разберем как эти критерии обнаружить, найти причину и что делать с экспериментом дальше.

Читать далее

Информация

В рейтинге
Не участвует
Работает в
Зарегистрирован
Активность