Часть 2. Иван Оселедец с докладом «Успехи и проблемы больших языковых моделей»

[ProfDonda]

Пмсм генеральная мысль такова - воздушные шары и дирижабли есть, ждём появления самолётов и ракет, собираем кейсы, пишем статьи, делаем доклады.

[alexhu]

производительность это ,что

Как то вы слишком всё усложняете. Все такие метрики меряются временем на операцию или количеством операций в единицу времени.

А сознание это немного поломанная цепь рассуждений - вместо объективного анализа по всем знаниям и фактам, в мозгу происходит прохождение сигналов по одному "кругу" используя личные воспоминания и эмоции. Новые факты при этом имеют незначительный вес. При прохождению по кругу сигналы самоусиливаются и это является личностью человека. Примерно такие объяснения.

Потому и происходит бум ИИ, что специалистам крупных компаний кажется, что они понимают куда двигатся, они сроки называют в несколько лет до нормального ИИ который уже будет трудно критиковать. Алгоритмы сейчас не совершенны, но и это планируют улучшить за счёт ИИ. Впрочем такие разговоры всерьёз идут с начала 60-х годов.

[alexhu]

No comments

"Переобучение", говоря терминами нейронного обучения.

[NeriaLab]

Вы сводите сложнейшую архитектуру мозга к примитивной схеме. Речь идет о динамических связях, синаптической пластичности, интеграции информации из разных модальностей и формировании сложных внутренних моделей мира.

Такое упрощение, какое Вы предложили, действительно можно расценивать как введение в заблуждение относительно того, что такое человеческое сознание с научной точки зрения.

[alexhu]

Конечно я упрощаю. Вы ожидали от 4 строк текста глубины фундаментальной теории?

[NeriaLab]

Упрощение не должно приводить к искажению смысла. Даже в четырех строках можно изложить мысль, которая не противоречит основам нейробиологии. Термины "поломанная" и "незначительный вес фактов" - это не упрощение, а некорректная оценка, которая вводит в заблуждение относительно природы сознания. Вот после таких "упрощений", у некоторых авторов и читателей Хабра и появляются заблуждения по разным вопросам. Когда люди начинают интересоваться когнитивно-символьными системами, их приходится очень долго "переобучать", так как им напихали в головы ерунды, как пример: "У LLM есть сознание/понимание/настоящий интеллект" и т.д.

[alexhu]

Больше половины сегодняшних школьников бывшего союза не знает на память таблицу умножения. В США считается успехом, если в четвёртом классе ученик умеет читать.

Я дал краткое понятное объяснение сознания. Если кто то заменит университетское образование на мой комментарий, то такое у него развитие и не я тому причина.