В момент оценки асессор не знает о том, какие системы оценивает. Да ему и не до этого, среднее время оценки — меньше минуты. За это время посмотреть какая система отдала урл — нереально.
Почему удовлетворенность результатами конечными пользователями не оценивается?
Может стоит на небольшой выборке тестировать вопросы, по удовлетворенности посещенными сайтами и почему они вернулись к поиску?
Удовлетворённость пользователей оценивается — с помощью пользовательских метрик. Немного подробней об этом планируем рассказать во втором посте.
Кстати и что касается консервации топа, в некоторых тематиках он уже 3 года стабилен (топ-10), а это значит, что получается совпали результаты по формуле обычной + машинному обучению + выбору асессоров?
Денис, можешь написать, сколько у вас факторов и оценок?
Могу назвать порядок цифр.
Факторов — порядка тысячи.
Оценок — миллионы :-)
как на счет актуализации оценок — сколько времени «живут» оценки — перепроверяете ли вы их все, как часто переоцениваете один и тот же запрос, чтобы оценить новые сайты?
Да, перепроверяем; да, переоцениваем. Регулярность зависит от частотности запроса.
разделяете ли вы как-то оценки на заслуживающие больше доверия (например, перепроверенные старшими асессорами, или по которым не было разногласий между асессорами) и менее?
Вы наверное путаете. Компания Альтергео никоим образом не принадлежит Яндексу; их базы геолокации существуют и пополняются независимо; сервисы геоопределения развиваются независимо.
Как мы описали в статье, Локатор принициально не может определить положение пользователя «точно». Допуск есть всегда. А вот когда Локатор не попадает в допуск, который сам декларирует — с этого момента правильно считать, что Локатор ошибся, «не сдержал обещание». И над минимизацией этой ошибки работать.
Абсолютные величины «радиуса допуска» нельзя измерить «одной линейкой», они будут неизбежно варьироваться от ситуации к ситуации (см. технические пределы точности около wifi и около GSM). Можно оперировать относительными величинами — коэффициентом у сигмы. Про это мы говорили — мы уменьшили этот коэффициент до предела, дальнейшее уменьшение приводило к резкому росту ошибок (выходов за пределы допуска).
В итоге, в этой задаче важен баланс — малые достаточные радиусы и высокая точность попадания в круг допуска.
Если наткнётесь на подобную проблему ещё раз — пожалуйста, напишите нам об этом в форму обратной связи. Возможно после этого коллеги попросят прислать дополнительные данные. Заранее спасибо!
Если я правильно понял вопрос, ответ такой:
1) зайдите на maps.yandex.ru
2) нажмите кнопку с «прицелом» (над полоской управления зумом):
3) браузер спросит «maps.yandex.ru запрашивает данные о вашем местоположении»:
4) после подтверждения браузеру он отдаст Яндекс.Картам данные, полученные от Локатора, и карта сфокусируется на области, где вы, по данным Локатора, находитесь
Пока нам неизвестно ни об одном решении, которое можно широко использовать для наших задач.
А о наших собственных планах мы, как всегда, не очень любим рассказывать :-)
К сожалению, устройства с джейлбрейком — совсем немассовый сегмент. Мы стараемся делать массовые приложения, которыми могут пользоваться миллионы простых людей, далёких от технологий.
Яндекс.Локатор — это API, который по списку наблюдаемых wifi-сетей и/или сотовых вышек, а также уровню сигнала от первых, определяет примерное местоположение.
«Десктопный» браузер в общем случае имеет доступ к списку wifi-сетей, наблюдаемых ноутбуком, и мощность доходящего от них сигнала. По ним браузер и определяет местоположение, обращаясь к Локатору. Разумеется, близость к сотовым вышкам в этом случае не используется.
Такие расхождения, разумеется, случаются сплошь и рядом, причём в обе стороны. Точность определения по wifi и сотовым вышкам — штука вероятностная, и всерьёз сравнения имеет смысл проводить только на достаточно больших выборках. Например, объехать интересующий город по ключевым магистралям, и в течение поездки логировать фактические координаты и место по wifi+GSM, определённое разными устройствами в одинаковых условиях.
Конечно, мы бы предпочли пользоваться своим решением — но в отсутствие такой возможности да, в собственных приложениях нам тоже приходится пользоваться штатными средствами iOS.
Если совсем кратко, протокол Bluetooth практически непригоден для этой задачи. Достаточно даже пары причин (на самом деле их больше): (1) крайне малый радиус действия, (2) по умолчанию выключен.
Насколько мы можем судить, да, только одним из перечисленных. Геоопределение по IP позволяет в большом проценте случаев (но не всегда) определить с точностью до города, в редких случаях до района.
Насколько нам известно — под iOS приложение может узнать лишь ту wifi-сеть, к которой телефон подключен, а также название оператора — но не номер базовой станции и не список всех ближайших wifi-сетей.
Строго говоря, помимо Android и нашего настольного браузера эти данные могут использовать нативные десктопные приложения (например, под Windows). А чтобы картина была совсем уж полной, есть ведь всё ещё немаленький парк устройств под Symbian.
О каких тематиках идёт речь, например?
Факторов — порядка тысячи.
Оценок — миллионы :-)
Да, перепроверяем; да, переоцениваем. Регулярность зависит от частотности запроса.
Мы с этим экспериментируем.
Абсолютные величины «радиуса допуска» нельзя измерить «одной линейкой», они будут неизбежно варьироваться от ситуации к ситуации (см. технические пределы точности около wifi и около GSM). Можно оперировать относительными величинами — коэффициентом у сигмы. Про это мы говорили — мы уменьшили этот коэффициент до предела, дальнейшее уменьшение приводило к резкому росту ошибок (выходов за пределы допуска).
В итоге, в этой задаче важен баланс — малые достаточные радиусы и высокая точность попадания в круг допуска.
1) зайдите на maps.yandex.ru
2) нажмите кнопку с «прицелом» (над полоской управления зумом):
3) браузер спросит «maps.yandex.ru запрашивает данные о вашем местоположении»:
4) после подтверждения браузеру он отдаст Яндекс.Картам данные, полученные от Локатора, и карта сфокусируется на области, где вы, по данным Локатора, находитесь
А о наших собственных планах мы, как всегда, не очень любим рассказывать :-)
Мы рады, что вам статья понравилась.
«Десктопный» браузер в общем случае имеет доступ к списку wifi-сетей, наблюдаемых ноутбуком, и мощность доходящего от них сигнала. По ним браузер и определяет местоположение, обращаясь к Локатору. Разумеется, близость к сотовым вышкам в этом случае не используется.
Строго говоря, помимо Android и нашего настольного браузера эти данные могут использовать нативные десктопные приложения (например, под Windows). А чтобы картина была совсем уж полной, есть ведь всё ещё немаленький парк устройств под Symbian.