Comments 11
Вы использовали ИИ-поисковик "Нейро" от Яндекса на базе YandexGPT. Фактически, вы сравнивали результаты поисковой выдачи на ваш вопрос, которые он лишь обобщал, с результатами работы других моделей. В вашем эксперименте YandexGPT, можно сказать, не участвовал
Всегда удивлялся с авторов, которые даже поверхностно не разбираются в вопросах, для решения которых инвестировано денег размером с половину экономики СНГ и миллионы человеко-часов. Это как можно не уважать всю индустрию...
Яндекс предлагает пользователю задать Нейро вопрос на естественном языке. Пользователь спрашивает Нейро, что тяжелее, кило перьев или фунт стали. Яндекс отвечает, что фунт перьев тяжелее фунта стали. Что должен сделать обычный пользователь -- прийти к выводу, что Яндекс так себе отвечает на вопросы, или изучить всю индустрию, чтобы понять, почему Яндекс и не должен нормально отвечать на вопросы?
Ну ну. У меня подключена "Алиса Про", которая типа работает на базе яндекс жпт 3. Вот что эта болезная ответила мне только что на вопрос про кг пуха и фунт свинца:
"Килограмм пуха и фунт свинца весят одинаково, так как килограмм и фунт являются единицами измерения массы, а не веса."
Вы неправильно использовали Яндекс. Нейро рассчитан на поиск ответов в интернете.
Ответы от Gemini больше похожи на 1.5 Flash, а не 1.5 Pro, я прогнало на 1.5 Pro эти же вопросы и получил вполне адекватные ответы
Зашел написать в коменты, что нейро нельзя сравнивать с гигачатом, но вижу, что уже все справились
Какоето странное сравнение. В гемени можно залить несколько мегабайт текста на анализ, она буквально может дописывать главы в книжки с сохранением характеров персонажей и т.п., у чатгпт же размер промпта огранисен парой десятков страниц текста до сих пор. ну и да, перформанс тоже несравним.
Пул задач которые может решать гемини просто в разы шире, опенаи явно не в ту сторону пошли, и теперь уже в роли догоняющих.
Алсо, проверил первый вопрос в гемини:
>15 полотенец высыхают на солнце за час. За какое время высохнут 20 полотенец?
>Время высыхания полотенец на солнце зависит от множества факторов (влажность воздуха, температура, интенсивность солнечного света) и не является линейно зависимым от количества полотенец. Если предположить, что все условия остаются неизменными, и каждое полотенце сохнет независимо от других, то 20 полотенец высохнут за тот же час.
Но если потеребить регенерейт то гдето 50 на 50 начинает считать. Проблема задачи то в неполноте, так что формально оба ответы верные, спрашивать надо так:
>15 полотенец высыхают на солнце за час. За какое время высохнут 20 полотенец? Задай дополнительные вопросы если потребуется.
Тогда будет стабильно верный ответ.
Зарегался только для того, чтобы написать, что автор ещё тот шарик. Не знаю, где и каким образом он проводил эти сравнения, но у меня даже без регена сообщения Гемини 1.5 про справился с задачкой и нашел сразу же подвох. В отличии от этой вашей ЖПТ-4 Омни, которая даже не у всех доступна, тут можно проверить самомк. И присоединяюсь также к отписавшимся выше, что сравнение некорректное. Нейро вообще не об этом.
Один лишь факт остаётся верным на 100% - все эти модели стали намного умнее себя же самих предыдущих версий. И факт второй Эти модели не могут решить НИ ОДНОЙ реальной задачи полезной для людей и с которыми справляются обычные люди прошедшие самообучение в конкретной области.
Мои вопросы Гемини 1.0
Кто такой Бишимбаев?
Это бывший министр Республики Казахстан, осуждён на 24 года за убийство своей жены в 2023 году. То есть эта старая модель точно имеет доступ к интернету иначе как бы она узнала об этом, единственная ее ошибка в этом ответе это год осуждения он осуждён в 2024 году.
Напиши саркастический стих о Бишимбаеве
Пишет стих на троечку с минусом по рифме и смыслу, но он действительно несёт саркастические нотки.
Как доказать то что Земля шарообразна так чтобы понял даже ребенок напиши по пунктам
Пишет правильно 9 пунктов, я пишу добавь еще, добавляет, прошу добавить более сложные ответы - добавляет и все правильно.
Прошу тоже самое у моделей от МЕТА она называется почему то похожим названием на модель Маска - groq, тут я запутался. Но это точно модель от мета так как там можно было выбирать из 4 или 5 разных моделей от Мета так вот на вопросы о треклятом Бишимбаеве они не ответили, стих о нем был лишён смысла так как модель попросту не знала кто это.
ChatGPT 4o оказалась умнее Gemini 1.5 Pro, а Сбер GigaChat — умнее Яндекса