Pull to refresh
4
0
Полина Ревина @previna

User

Send message

Как оценить валидность A/B-тестов. SRM и другие критерии

Level of difficultyMedium
Reading time8 min
Views2.1K

Привет! Меня зовут Полина, я руковожу A/B‑платформой в СберМаркете. В этой статье я расскажу о нескольких нюансах экспериментирования, которые возникают на разных этапах — от дизайна и сплитования до подведения итогов. Если их не учитывать, нам приходиться с осторожностью относиться к результатам или вовсе проводить эксперимент заново. К ним относятся Sample Ratio Mismatch, корректное пересечение тестов, взаимодействие нескольких экспериментальных механик и другое. Разберем как эти критерии обнаружить, найти причину и что делать с экспериментом дальше.

Читать далее
Total votes 6: ↑6 and ↓0+8
Comments1

Information

Rating
Does not participate
Works in
Registered
Activity