Обновить

Комментарии 3

а алиса сюда встраивалась отдельно или это яндекс-поиск сам определяет что надо в алису отправить?

Подпишусь под тем, что рейтинг нейросетей надо проверять на своей нише, а не брать чужой. Добавлю то, на чём сам споткнулся: проверять его надо ещё и на своём поколении моделей.

Гонял в августе один и тот же набор запросов по двум поколениям — Gemini 2.5 против 3.6, DeepSeek V3.1 против V4. Совпадение состава источников между поколениями: коэффициент Жаккара 0.31 по Иркутску и 0.25 по Москве. Три четверти списка обновилось за одно поколение.

Сильнее всего разъехалась как раз локализация, а это ваш случай с региональной аудиторией. На запрос про мастера на дом в Иркутске свежая Gemini дала 13 доменов, 8 из них иркутских. Прошлое поколение той же модели — 42 домена и ноль местных. DeepSeek V4 на тот же запрос цитирует Одессу, Киев и Минск.

И практическая ловушка для тех, кто пойдёт делать ваш прогон по шести моделям: свежая Gemini отдаёт источники не прямыми ссылками, а обёртками vertexaisearch.cloud.google.com/grounding-api-redirect/.... Если считать домены как есть, выйдет, что модель процитировала один сайт — google. Их надо разворачивать по редиректу.

За выгрузку по шести источникам отдельное спасибо — распределение целиком показывают редко.

у меня по статистике из метрики чаще всего заходят с алисы, а вот реальный заказчик пришел из perplexity. Если бы он не показали мне промт и рекомендацию моей компании в выдаче ии, я бы и не знала что perplexity меня рекомендует. очень неудобно кстати что нет статистики по ии как в яндекс метрике.

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Публикации