Comments 9
Я правильно понимаю что они хотят фрагментировать память и задачи и уже впоследствии эти фрагменты связывать в целостную картинку? Костыли гемини , такая динамическая иерархия создаст ещё больше путаницы чем есть
Зато не такая подача привлечет больше бабосиков.
Примерно так. Допускаю, что путаницы может быть больше, но остальные технологии постоянного обучения пока выглядят не лучше. Это одна из самых сложных задач для прогресса ИИ на данный момент.
Хорошее продвижение, это лучше чем ничего не делать!
Странные они.
Своевременное и эффективное забывание устаревших знаний - это неотъемлемая и необходимая, противоположная запоминанию, часть процесса обучения.
Это же совсем как люди и другие звери - живут, живут - и умирают.
Так что забывание - это поражение слабых знаний в борьбе за выживание и самосохранение с другими, более сильными знаниями.
Естественный отбор знаний. И не нужно ему мешать.
А вообще, я считаю, что у ллм основная причина глюков и забывания - отсутствие того или иного явно выраженного типа информационного метаболизма - преимущественного субъективного фокуса на тех или иных противоположностях фундаментальных дихотомий.
Безудержное скармливание модели множества несовместимых, противоречивых и противоположных точек зрения на одни и те же явления приводит к возникновению внутренних неразрешимых противоречий и рандомномному удалению или придумыванию тех или иных псевдо знаний.
Забывание в этом смысле - инвертированная разновидность галлюцинации.
Своевременное и эффективное забывание устаревших знаний
Проблема только в том что LLM'ки забывают любые знания, а не только устаревшие.
Например устаревшие знания что люди из обезьян и арифметику и законы архимеда.
мне не хватает кармы, чтобы минуснуть) поэтому выскажусь на предмет опасности вашего сильного комментария, который как раз включает в себя противоречивое. С одной стороны - речь идет о том, как вы лихо управились с понятием "знание". Метафоры, аналогии это все прекрасно. Но как раз "знание", к счастью, не "живет" по законам молекулярного мира. Ваша фраза - "естественный отбор знаний, не надо ему мешать", наводит на мысль, что Вы, возможно, толкуете про "идеологию", красиво подменяя ей понятие "логос". Какая у нас идеология бывает? Ну например нацистская. Она как раз про то, чтобы навешать ярлыки правильности и про поражение слабых в этой борьбе, иногда в газовых камерах под классическую музыку. Не так ли?. Желательно прямо сейчас обратиться к успешно нажитому к 2020м годам "общечеловеческому знанию", пока не разбазарили его окончательно, не забыли, не переинтерпретировали до неузнаваемости. Начать можно прямо с греков или арабов. Собственно опасность разбазаривания - это не аларм для знания. Аларм для нас. Мы можем уже "не потянуть" то, что могли осмыслить древние. Со знанием как раз ничегошеньки не станет. Оно как было, есть, так и продолжит быть. Но вот подход людей к тому, каким образом эти знания "проявлять" в действительность, где щупать пресловутого слона, а затем "удерживать знание в технологии", чтобы продолжала виться ниточка прогресса в адекватную сторону, а не в формат антиутопишоу - может значительно варьироваться. "Придумывают" знания или медийщики или люди бизнеса, которые непосредственно со знанием - не работают. Их работа в другом совершенно поле. В идеологически-капиталистическом. Деньги зарабатывают, власть, признание. Мало ли. Потому что знаете что самое забавное в "знании"? Что оно действительно может меняться. Соразмерно тому, на какой стадии развития находится человек. Земля плоска - бац - Земля круглая. Доктора говорят младенца пеленать, доктора говорят - младенца ни в коем случае не пеленать. Такими темпами вполне можем дожить до времен, что все мы поплывем в космическом-океане на слонах и черепахах, и это будет ок. Потому что категория "знание"- "истина" -"логос" - она уже существует, а не "создается". И ответственность человечества, homo sapience, чтобы из этого бескрайнего по сути поля не вытащить ненароком то, что его прибьет. А мы именно этим постоянно и занимаемся. То ядерная энергия, то психическая. И, заметьте, каким-то волшебным образом человечество, минуя огромное число войн, угнетений, выживания и всего такого прочего все же трансформировалось в свое современное состояние. На текущий момент весьма неустойчивое, учитывая все вопросы биоэтики. Поэтому с другой стороны Вы правы в том, что безудержное скармливание модели несовместимого в надежде на получение творческого результата, что модель сама разберется с векторами, выйдет в надсистему, лишенную дихотомий, никого при этом не убьет - это перемалывание слона в фарш, создание кадавров и псевдо-знаний. Увы.
В Google предложили решение одного из главных недостатков ИИ