Всем привет! Недавно X5Tech провела митап, где эксперты компании говорили о том, как работают над проектами по Big Data. Делимся записью выступлений и презентациями спикеров.

Старший менеджер по работе с большими данными Станислав Морозов выступил с темой «AБ-тестирование в офлайн ритейле. Особенности дизайна эксперимента». На историях из практики он рассказал об ошибках, которые встречаются при дизайне офлайн АБ-тестов, и о том, как их избежать. К примеру, для нас важно избегать слишком малых выборок и пристально следить за качеством метрик, которые используются при анализе.
→ Презентация

Ведущий менеджер по работе с большими данными Алексей Кучаев рассказал о «АБ-тестах на скоррелированных объектах». В его презентации можно найти способы того, как повысить эффективность АБ-тестов. Так Алексей, например, объяснил метод кластеризации, который снизил кросс-корреляцию в данных.
→ Презентация

Ведущий менеджер по работе с большими данными Артём Ерохин в своей презентации «Как перестать беспокоиться и полюбить метаанализ» поделился тем, что такое метаанализ и какие у него плюсы и минусы. Заодно он рассказал о нескольких базовых методах проведения метаанализа: комбинировании p-values, модели фиксированных эффектов и модели случайных эффектов.

→ Презентация

Ведущий менеджер по работе с большими данными Ваагн Минасян завершил митап вступлением на тему «Doubly Robust Difference-in-Differences Estimators: обзор способа оценки эффекта». Используя за основу научную работу зарубежных учёных, Ваагн рассказал о применении оценок с двойной надёжностью совместно с оценками Difference-in-Differences. В его выступлении описываются предпосылки и принципы метода, а также приводится пример базовой реализации на Python.
→ Презентация

Успешное АБ-тестирование: о чём говорили на Data Driven Meetup #2