На нашем последнем митапе для аналитиков спикеры рассказали, как избегать ошибок в экспериментах, в чём польза Доставки и как мы продвигали её на Авито, а также как мы сделали рекомендации для менеджеров по продажам в Salesforce. Собрали для вас видеозаписи выступлений с таймкодами.

Избегаем ошибок в экспериментах: что если A и B разошлись — Тимур Исмагилов

Доклад Тимура построен от простых вещей к сложным. Сначала он напоминает базовую теорию про A/B-тесты и эксперименты, а затем переходит к конкретному кейсу по анализу скидочных акций на услуги продвижения.

00:00 — Представление спикера и план доклада

01:11 — Объяснение A/B-тестов на примере запуска Доставки

04:01 — Уточняем результат: RATIO, proxy-метрика, subsample и выбор пользователей для теста

13:28 — Кейс: анализ скидок на продвижение на Авито

17:35 — Уточняем результаты: subsample и subsample + proxy

22:05 — Смотрим на разрезы

24:39 — Ошибки, которые закрались в предыдущие выводы, и как их починить

38:25 — Выводы: что привело к успеху

20:46 — Ответы на вопросы

Посмотреть презентацию Тимура

Delivery in Search and Recommendations — Александр Мирской

Александр рассказал, почему Доставка помогает пользователям находить на Авито нужные товары, а также как мы её продвигали в поиске и рекомендациях. Всё это с цифрами и результатами тестов.

00:00 — Представление спикера и план доклада

00:39 — Введение: проблема поиска подходящих объявлений и при чём здесь Доставка

08:40 — Решения в поиске: блок доставки в малых выдачах

18:45 — Решения в поиске: спецблок доставки

20:40 — Решения в поиске: бустинг объявлений с доставкой

25:01 — Блок доставки в рекомендациях к объявлению

28:05 — Итоги

28:27 — Ответы на вопросы

Посмотреть презентацию Александра

На сегодня всё. До встречи на новых митапах!

Материалы митапа для аналитиков: кейс с A/B-тестами и продвижение Доставки