xxxxeo — в основном покупает эксклюзивные хорошие прощадки, на большом RTB, конечно, торгуется, но по минимальной цене. У них оптимизация на сид куки в правильным момент, чтобы им лид зачелся, а не на ценность Вашему бизнесу.
Так что это псевдо RTB или просто хорошая, таргетированная реклама.
RTB тут совсем нет.., так что смело можно править заголовок. А вот эффективность ретаргетинга лучше всего мерить А/Б тестом, т.е. половину пользователей отдавать ххххео, а о второй половине пользователей вообще им не рассказывать (пиксель и код ретаргетинга не показывать).
Аудиторию в лоб можно поделить по четной / нечетной цифре юзер куки.
Потом посчитать количество экспериментов, доверительный интервал и будете знать статистически точно сколько денег вы заработали на ретаргетинге, и с другой стороны — сколько вы денег заплатили им по счетам.
Возможно повторюсь — как у меня под катом, так и в приведенной статье — идет определения размера контрольных групп, тест еще не начался. Делали тесты мы не по статье, а по учебнику(Бородич С.А. Эконометрика) откуда и были приведены формулы (1) и (2) с заранее заданными константами.
В этом конкретном случае — приведен пример для понимания порядка цифр. В примере вычисляется доверительный интервал только для одной из групп с конкретно приведенными параметрами(которые можно однозначно сравнить с параметрами сайта читателя) и вычисления показывают, что при проведении аналогичного теста — значимыми для этой конкретной группы могут быть отклонения больше чем в 14%, а все что меньше — и для этой группы статистически незначительны.
Только после этого — появляется вторая группа, для которой вновь необходимо вычислить доверительный интервал. И тест покажет значимый результат, только после расхождения интервалов.
В реалиях интернета нельзя определить достаточный размер контрольных групп*, и после этого именно его получить, в отчете, что скидывал в личку число пользователей в группах заметно различается, а значит доверительный интервал для уже полученной группы нужно считать по факту получения информации, чем мы и занимаемся.
Формула (1) приведена только для расчета порядка необходимых цифр, достаточных для получения значимого результата.
* как вызов который перед нами стоит — нужно проводить тест E-mail рассылки, но мы не можем поделить пользователей на группы, так как не можем знать того отклика, что получим в будущем.
Обязательно! На большей части проектов(и не только web) основные лиды приходят именно от лояльной аудитории. Тест только на новом трафике не покажет ровным счетом ничего, а постоянная аудитория может на него неожиданно отреагировать.
Так исторически сложилось — что большая часть пользователей — лояльная аудитория. Внедрение небольших изменений приводит или к повышенному или к пониженному интересу(далеко не всегда +), но когда все интересующиеся попробовали — и начинается чистый эксперимент.
Хорошим примером может служить недавний редизайн Хабра, уверен каждый подумал что — то свое, пока привыкал)
По вопросу: доверительный интервал слишком большой, и однозначно сказать эксперимент дал положительный результат или отрицательный нельзя. Заключение тут одно: в этот момент выводы делать ошибочно, нужно терперия набраться.
В момент посещения пользоватем сайта для его браузера присваивается кука со сроком жизни, когда пользователь с этого устройства приходит снова — мы проверяем на какую цифру заканчивается(четная группа А, нечетная группа Б), так мы добиваемся того, что пользователь с одного устройства — всегда попадает в одну группу.
Данные о всех куках через логи укладываеются в БД, и именно оттуда мы получаем достоверную информацию о том, сколько кук было в одной группе и сколько в другой.
На практике расхождения могут достигать и 10%, поэтому вычисляется доверительный интервал для каждой группы и конверсия целевого действия.
Сайты за второй тысячей Alexa.com имеют посещаемость менее 20000 уникальных пользоватей, реальный уровень конверсии, который стоит учитывать(деньги, заказы, заявки) в E-commerce редко больше 3%, а значит для получения значимого результата тест не может длиться меньше 2-4 недель и скорее всего на его результаты может влиять внешние факторы, такие как сезонность рынка, спрос на продукт и т.п.
Так что это псевдо RTB или просто хорошая, таргетированная реклама.
Аудиторию в лоб можно поделить по четной / нечетной цифре юзер куки.
Потом посчитать количество экспериментов, доверительный интервал и будете знать статистически точно сколько денег вы заработали на ретаргетинге, и с другой стороны — сколько вы денег заплатили им по счетам.
Удачи и отчетов за идею)
Давайте определимся в терминологии:
Значение конверсии с вероятностью 95% лежит внутри интервала от 1,72% до 2,28%. — для одного измерения(одной группы) — верно?
В этом конкретном случае — приведен пример для понимания порядка цифр. В примере вычисляется доверительный интервал только для одной из групп с конкретно приведенными параметрами(которые можно однозначно сравнить с параметрами сайта читателя) и вычисления показывают, что при проведении аналогичного теста — значимыми для этой конкретной группы могут быть отклонения больше чем в 14%, а все что меньше — и для этой группы статистически незначительны.
Только после этого — появляется вторая группа, для которой вновь необходимо вычислить доверительный интервал. И тест покажет значимый результат, только после расхождения интервалов.
В реалиях интернета нельзя определить достаточный размер контрольных групп*, и после этого именно его получить, в отчете, что скидывал в личку число пользователей в группах заметно различается, а значит доверительный интервал для уже полученной группы нужно считать по факту получения информации, чем мы и занимаемся.
Формула (1) приведена только для расчета порядка необходимых цифр, достаточных для получения значимого результата.
* как вызов который перед нами стоит — нужно проводить тест E-mail рассылки, но мы не можем поделить пользователей на группы, так как не можем знать того отклика, что получим в будущем.
Отличная зона роста для поста!
Хорошим примером может служить недавний редизайн Хабра, уверен каждый подумал что — то свое, пока привыкал)
signalvnoise.com/posts/3004-ab-testing-tech-note-determining-sample-size
Результат — в личке
По вопросу: доверительный интервал слишком большой, и однозначно сказать эксперимент дал положительный результат или отрицательный нельзя. Заключение тут одно: в этот момент выводы делать ошибочно, нужно терперия набраться.
А для того, чтобы понять что именно делает этот прогресс — нужно уметь делать выводы.
Данные о всех куках через логи укладываеются в БД, и именно оттуда мы получаем достоверную информацию о том, сколько кук было в одной группе и сколько в другой.
На практике расхождения могут достигать и 10%, поэтому вычисляется доверительный интервал для каждой группы и конверсия целевого действия.