Comments 96
20 лет это оптимистично даже для оптимиста.
Надежда продолжить ряд в 2022 году меня пока не оставила :)
Учитывая существование 1тб микросд, вполне можно ими заполнить обьем первой флешки и получить 32тб
Пора продолжать :)
И вот теперь страной правит вечный и бессменный компьютер-маразматик.
Проживите ещё лет двадцать — и, возможно, ваш мозг тоже получится забэкапить.
Использование 'тонких послойных разрезов мозга' это скорее архивирование, чем бэкап :)
Которое чуть менее чем нифига дает для понимания а тем более бэкапирования крутившихся и хранившихся на них операционки, фоточек и архивов с текстами например.
В мозге информация хранится в виде структуры синаптических связей, при этом сила синаптических связей связана с изменением проводимости дендритных шеек [spine necks]. См. например www.pnas.org/content/111/28/E2895. Если бы информация в мозге хранилась бы в виде электрических зарядов, то человек бы легко бы полностью терял память, скажем, от удара током или от воздействия электромагнитного джаммера.
Если вас интересует эта тема, также советую работы, посвящённые исследованиям синаптической пластичности, зависящей от времени импульса (Spike-timing-dependent plasticity, STDP). Например, классическое исследование Малиноу: Malinow R. (1991). Transmission between pairs of hippocampal slice neurons: quantal levels, oscillations, and LTP. / Science, Vol. 252, Iss. 5006, pp. 722—724. // doi.org/10.1126/science.1850871
Так же несколько лет назад всплывал проект openworm по воссозданию коннектома упоминающегося вами червя С.elegans. C одной стороны коннектом известен с 1986 года, состоит всего лишь из 302 нейронов, но тем не менее искусственного червя так и не появилось. В чем сложность подобных проектов и когда будут прорывы не только в считывании, но и воссоздании коннектомов?
> синаптических связей, но ведь еще есть краткосрочная память,
> есть ли наработки по ее считыванию?
Да, конечно. Основные подходы на сегодня здесь это неинвазивные (ЭЭГ, МЭГ, фМРТ, ПЭТ) и инвазивные (имплантация микроэлектродов и оптогенетика). Я бы поставил на МЭГ и отптогенетику, а почему — у нас будет про это отдельный пост)
> но тем не менее искусственного червя так и не появилось
Мне кажется, что в OpenWorm неплохой прогресс. Это, правда, очень маленький проект с очень скромными фондами. Я думаю, что основная проблема в недостаточных ресурсах, выделяемых на такие проекты. Правительства делают ставку скорее на подход: давайте симулировать части мозга более сложных существ, как в проектах Маркрама. В HBP, BBP, в рамках Brain Initiative, China Brain и др. основной вектор исследований — сделать специализированные железки, подготовить параметры симуляций и провести таких симуляций побольше, чтобы уточнить параметры моделей. Симулировать C. elegans, аплизию и т.п. они не хотят, т.к. считают задачу тривиальной. Там сразу мозг крысы обычно берут.
ведь еще есть краткосрочная память, есть ли наработки по ее считыванию?Кратковременная память — это текущая активность нейронов за последние 20 секунд. Нейролинк и все подобные зонды считывают текущую активность групп нейронов.
Когда вы изобретете способ неинвазивно картировать все сотни-тысячи дендритов 80 млрд нейронов мозга, тогда это будет реальным методом (но физически таких инструментов не будет, равно как и вычислительных мощностей на такой объем данных).
Ну и наконец, я верю, что можно определить группы нейронов, связанных в определенную зависимость более прочными синаптическими связями. И в случае какого-нибудь среднего мозга или базальных ганглиев вы даже точно скажете, что это какой-нибудь болевой сенсор или разгибатель. А вот в коре отличить вкус яблочного пирога от номера телефона бывшей вы ну никак не сможете.
Вот когда сможете различить под микроскопом отдельные клетки мозговой ткани, тогда и поговорим
Вот когда сможете доказать, что нервные волокна — это отростки клеток, тогда и поговорим
Вот когда сможете измерить электромагнитную активность мозга, не вскрывая черепную коробку, тогда и поговорим
Вот когда сможете найти нейроны, активирующиеся в ответ на отдельные визуальные признаки, тогда и поговорим
Вот когда покажете хеббовское обучение в биологических нейронах, тогда и поговорим
Вот когда покажете STDP в биологических нейронах, тогда и поговорим
Вот когда покажете коннектом хотя бы одного организма, тогда и поговорим
Вот когда научитесь автоматизировать построение коннектома, тогда и поговорим
Вот когда покажете коннектом, размером хотя бы 100 000 нейронов, тогда и поговорим
=== Вы находитесь здесь ===
Вот когда вы изобретёте способ послойно тонкими слоями, не теряя ни одного, картировать все сотни-тысячи дендритов 80 млрд нейронов мозга, тогда и поговорим
Вот когда вы изобретёте способ неинвазивно картировать все сотни-тысячи дендритов 80 млрд нейронов мозга, тогда и поговорим
Вот когда вы найдёте способ в коре отличить вкус яблочного пирога от номера телефона бывшей, тогда и поговорим
Вот когда вы сможете сделать протез головного мозга, тогда и поговорим
Если все это и физически осуществимо (а принципиальные технологии все уже развились и могут только оттачиваться до своих технических пределов), то точно не восторженным читателям научпопа ближайших 3-х поколений об этом судить.
Опять же, вы напираете на ступень достижений, типа — кубик мозга откартировали, откартируем со временем все. Да зашибись, вы откартируйте его in vivo, а не порезав мозг человека на кусочки. Неужели вы не чувствуете этой принципиальной разницы? Современные неинвазивные методы iopscience.iop.org/article/10.1088/1748-0221/13/02/C02039/pdf или www.nature.com/articles/srep14982 годятся пока только на грызунов и в принципе не смогут дотянуть по разрешению до отдельных дендритов и аксонов.
Если оперировать какими-то совсем общими понятиями и фантазировать, не существует способа ассоциировать активность нейронных связей с высшей нервной деятельностью, кроме мониторинга этой самой активности. Все современные зрительные протезы идут по этому пути — потыкали электродом сюда, зажглась искра справа вверху в глазах, отлично, откалибровали. Подумал о бывшей, считали активность коры каким-нибудь неинвазивным методом, нанесли на тепловую карту. Вот грезите вы о переносе личности в искусственный мозг, а как вы будете это делать — заставите по очереди продумать человека всю его жизнь? Принесете ему все запахи мира понюхать? Обучать нейроны протеза мозга так же будете?
Без хотя бы самой общей и принципиальной картины того, какими подходами вы будете создавать искусственный мозг и воспроизводить в нем накопленную информацию, — надеяться просто создать абсолютную копию мозга, чтобы она сама — это бессмысленный карго-культ. Это не научный подход, это просто фундаментальное исследование.
Вот ввалили миллиарды и десятилетия на расшифровку генома человека. Ну отсеквенировали весь, да. Ну подешевели эти методы, став с тех пор копеечными и доступными. Как прочтение всей аминокислотной последовательности помогло разом понять всю сущность человека? Да никак, это журналистские слова. Есть еще посттрансляционные модификации, эпигенетика, метаболом. Как геном — это база данных, так и мозг — всего лишь куча аксонов-проводов, сом-роутеров и ганглиев-коммутаторов. Как работа клетки определяется базой данных, не не ограничивается только ей, так и личность зависит от коммутации и хранения данных, но не является картой сети.
Я полагаю, что от нас до первого функционального аналога мышиного мозга — это примерно как от Исаака Ньютона до первого космического полёта.
В мозге информация хранится в виде структуры синаптических связей, при этом сила синаптических связей связана с изменением проводимости дендритных шеек [spine necks]
Вот, это пожалуй главное что хотелось бы понять. Если с точностью воспроизвести толщину связей — достаточно ли это для того, чтобы он работал как родной :).
— проводимостью собственно аксона (на это влияет миелинизация);
— количеством рецепторов AMPA и NMDA на клеточной мембране;
— количеством связей между аксоном и дендритами (количество и структура дендритных шипиков, в т.ч. толщина дендритных шеек).
Что во всей этой истории хорошо, что на основе данных микроскопии веса синапсов рассчитать можно. Вот несколько статей по этой теме:
www.frontiersin.org/articles/10.3389/fnins.2018.00389/full
www.ncbi.nlm.nih.gov/pmc/articles/PMC4274056
www.nature.com/articles/s41467-019-09337-0
Вопрос сейчас стоит в повышении точности таких методов.
Я уверен, что первая модель мозга какого угодно существа будет переусложнённой и чрезвычайно избыточной, но именно она позволит выяснить основные закономерности, как там всё происходит, и построить упрощённую и более реалистичную модель.
У Caenorhabditis elegans есть функция: самообучение не есть несъедобных и ядовитых простейших и бактерий. Это жизненно важная функция. За это отвечают 2 (ДВА) нейрона. А собственно память хранится в одном. Теперь вдумайтесь, есть огромный открытый мир, есть невероятное количество видов и штаммов бактерий и простейших. Один нейрон распознает несъедобных и ядовитых простейших и бактерий, и он же почти самостоятельно обучается и хранит в себе память о них. Без внешних сложных воздействий.
Другой один нейрон изменяет поведение всего червя и генерирует функцию уклонения от препятствия, когда с ними сталкивается. При такой насыщенности функциями отдельных нейронов понятно, почему 302 нейронов при его достаточно сложной жизни червю достаточно.
Все эти искуственные нейронные недосети работая по своим великим и секретным алгоритмам используя вычислительные подвалы тратящие магаватты энергии и близко ничего такого не могут. Именно за счет простоты схемы обучения (проще 2х нейронов врядли будет) можно логически восстановить как это реально работает. Попробуйте.
Есть насекомые которые распознают друг друга с помощью зрения состоящего из 12 пикселей всего. По 6 пикселей на каждый глаз.
Есть насекомые которые полноценно летают имея всего 600 пикселей (по 300 на каждый глаз). При этом не только распознают представителей своего вида, но и облетают препятствия, точно садятся на поверхности, избегают хищников, находят еду и делают много чего другого.
И еще одно место разочарования. В мозгу человека при рождении интеллекта нет. Без нахождения в человеческом обществе интеллект у человека и не появится никогда. То есть можно вдоль и поперек картировать мозг, реально понять как работают его отдельные части и как они работают вместе, и не понять что такое общий ИИ при наличии полноценной карты мозга.
oulenspiegel
Я пытаюсь говорит о том, как реально устроен мир. Вы мне противопоставляете фантазии и неограниченную временем веру. Прогресс ML по моему мнению смехотворен, особенно если сравнивать обещания MLнеров с его реальными достижениями. При чем, явно же понятно почему не будет существенных улучшений. Меня ничего не корежит. Мне реально смешно сравнивать заявления с реальными результатами.
А от прогресса в области глубокого обучения всех поклонников символьного ИИ корёжит уже лет пять :) Проблема как раз в том, что такие сети могут очень и очень многое, но есть люди, которые будут упорно говорить, что обе пирамидки белые, просто игнорируя всё происходящее в области науки и технологий.
А ещё нельзя построить летательный аппарат тяжелее воздуха :)
Ну, надо заметить что ЛА тяжелее воздуха сделали вовсе не на основе тщательного изучения того как летают созданные природой птицы…
До появления аэродинамических труб и современной аэродинамики, авиация во многом держалась именно на бионике. Только не обязательно прототипом были птицы — это были и различные планирующие объекты. Кроме того, бионика не обязательно означает, что природные прототип копируется досконально. Иной раз польза бионики вообще только в том, что наличие в природе того или иного объекта означает принципиальную возможность инженерного решения. То есть сам факт наличия летающих птиц или планирующих листьев деревьев или семян показывает, что полёт аппарата тяжелее воздуха в целом возможен.
Исследования полёта природных объектов оказало большое влияние на начальные стадии становления авиации. Разумеется, со временем люди стали создавать более отвечающие их потребностям конструкции, которые далеко ушли от своих природных прототипов, но это не значит, что бионика не внесла своего вклада в становление этого направления.
Если мы говорим о коннекционистских моделях, то работы Хьбела и Визеля по исследованию коры мозга кошек, например, привели к созданию свёрточных нейронных сетей, хотя нельзя сказать, что современные CNN являются точной копией прототипа.
Конечно, если хочется обязательно жить в чёрно-белом мире, в котором есть только два стула, то это можно организовать, но я не очень понимаю этого желания всё упростить и сказать, что детально изучать природные объекты не нужно и что для технологии это не нужно. По-моему, это очень близорукая позиция, не учитывающая опыта науки и не основанная на здравом смысле.
А большинство людей недостаточно образованы и критически мыслят, и хавают всю эту трансгуманистическую чушь вида «ооооо сейчас микроскопом заглянем в мозг и смоделируем на Нвидии сознание ооо заморозим себя будем тыщу лет жить, китовая акула смогла и мы сможем оооооо»
За это отвечают 2 (ДВА) нейрона. А собственно память хранится в одном. Теперь вдумайтесь, есть огромный открытый мир, есть невероятное количество видов и штаммов бактерий и простейших. Один нейрон распознает несъедобных и ядовитых простейших и бактерий, и он же почти самостоятельно обучается и хранит в себе память о них. Без внешних сложных воздействий.Сам нейрон распознаёт? Т.е. у него есть рецепторы, отвечающие за детект определённых соединений, на которые происходит реакция?
А насчёт одного нейрона памяти — если взаимодействие там чисто электрохимическое, т.е. на входе и на выходе только изменение AP, то можно описать этот нейрон и, чисто теоретически, вставить вместо него полностью синтетический нейрон с такой функцией зависимости выхода от входа.
А если кроме электрохимического взаимодействия присутствуют другие модели (например, химическое) — то имеет смысл в первую очередь искать их и пути их воздействия на нейрон.
Но рывок техпрогресса, который человечество совершило буквально за последнюю пару сотен лет, просто огромен. Я вот помню в конце девяностых увидел электронный микроскоп в Физтехе, а программировал я тогда рентгеновский дифрактометер на ДВК с 56 КБ памяти и 5МБ винчестером, и тогда это казалось чуть ли не верхом совершенства.
Я это к тому, что всё это — дело времени, и создание функциональной модели мозга небольшого животного типа мыши — вопрос скорее всего нескольких сотен лет. Сейчас уже можно картировать, но ещё не очень понятны процессы в нейронах. Но я не думаю, что мы уже упёрлись в абсолютный предел знаний, просто надо упорно работать дальше.
Ну и сопроцессор в мозг ну очень хочется уже — тут картирование вполне может помочь — надо просто понять, куда подключиться. Вон, с болезнью Паркинсона научились отчасти бороться, стимулируя субталамическое ядро парой электродов (и при этом ещё даже не до конца разобрались как оно работает)
Кто может объяснить, как я умею без проблем, скажем водить машину, программировать, и т.д, но для элементарной арифметики мне нужен каклькулятор?
Мозг обезьяны эволюционно заточен под управление телом и распознавание образов. В нем нет АЛУ, ему нечем считать. Поэтому поверх распознавания образов, да ещё и поверх сознания строится эмуляция АЛУ. Разумеется, чудовищно неэффективная по сравнению со специализированными устройствами.
Дополню. Представьте себе, что счёт возможен только путём выведения знаков на экран и распознавания их с экрана. Вот как-то так мы и считаем. А потом возникает блик на экране — и весь счёт сбивается, надо начинать сначала.
Как мне кажется, данный опус по своей «научности» не дотягивает даже до ленты.вру (там, порой — но очень редко! — все-таки появляются полу-специалисты, способные хотя-бы уяснить тематику). Тут же — какой-то безумный хайп, надерганные с миру по нитке цитирования. Впрочем, я слышал, что в необходимые умения менеджера Сбербанка логика и научное образование не входят…
Прогресс ML по моему мнению смехотворен, особенно если сравнивать обещания MLнеров с его реальными достижениями.
А вы сравните с прогрессом эволюции. Вон какие штуки вывела, но только за миллиарды лет.
Замораживанием без пропитывания криопротекторами повреждается все и напрочь. Если вам предлагают за деньги заморозить ваш мозг в жидком азоте, «чтобы потомки воскресили» — смело сикайте ему поперек лица.
Проживите ещё лет двадцать — и, возможно, ваш мозг тоже получится забэкапить.Если 20ый год будет и дальше преподносить сюрпризы, боюсь обещать я ничего не могу
Современныей нейросети придумывались когда люди знали один-два нейромедиатора, и думали, что всё остальное — топология. Слабо назвать сколько десятилетий назад эта идея устарела? :))
Послойное картирование никак не ответит на вопрос какие вещества накопленны в каждом дендрите нейрона, к чем сводится память, и тем более ничего не скажут о содержании нескольких тысяч известных на данный момент нейромедиаторов, и плотности рецепторов на них в поверхностях каждого нейрона.
К копированию её сознания это приближает точно так же как мекханические куклы 19-ого века на шестерёнках приближали к созданию андроидов, заменяющих людей на рабочих местах.
2. Откуда взято это странное число (2000—6000)? Вообще-то их чуть больше 40. Вы, видимо, путаете число молекул, которые могут оказаться в синаптической щели (молекулярная ёмкость синаптических везикул?), а не число *разных* молекул. Но это не имеет отношения к долгосрочной памяти.
www.kenhub.com/en/library/anatomy/neurotransmitters
А ещё надо учитывать, что нейрон имеет очень не шарообразную форму, и в разных частях клетки уровень этой химии может быть разным и это тоже имеет значение.
2) Нейротрансмиттеров работающих в синаптической щели относительно мало, хотя далеко не один, как когда-то думали, а все наши нынешние ИНС упорно не хотят с этими сложностями связываться. Но нейрофизиологи давно поняли, что большое значение имеют нейромедиаторы работающие вне синаптических щелей и цифру в несколько тысяч называл во время своего доклада нейрофизиолог, которого попросили прокомментировать перспективу моделирования нервной системы. Дело было на конференции «Нейроинформатика 2015» и у меня есть все основания ему доверять, потому что он втыкал в мозг обезьяны электроды и моделировал положение её конечностей по собранным данным ещё до того, как это стало мейнстримом.
Я предполагаю, что срезание острым лезвием тут уже не поможет, нужно испарение лазером и считывание поверхности через микроскоп сверхвысокого разрешения (возможно даже атомно-силовой)
Про разные вещества в разных дендритах одного нейрона — есть ссылки, где про это можно почитать, как они влияют на функции самого нейрона?
нейросеть мыши
при этом на картинке — землеройка
Землеройка это не мышь.
Адолф Бек сделал свои открытия, работая в городе Львов, который входил в те времена в состав Австро-Венгрии. Государства "Польша" в 1890м году не существовало.
Зачем делать такие тонкие срезы — 40 нм? Можно ведь делать слои по несколько микрометров, и они будут прозрачны для оптических микроскопов (размер нейрона — 5-150 мкм, поэтому «мёртвых зон» не будет). Можно было бы автоматически строить карту такого слоя с помощью алгоритма построения 3d-модели на основе стереоскопической пары изображений (для увеличения точности можно сканировать слой под разными углами, так что, не только стерео-, но и «мультископической»).
Забэкапить мозг это конечно круто, но сомнительно, что мозг=сознание. Сознание, можно так сказать — это осознание себя, как главного персонажа, созерцателя мироздания. И если где-то параллельно со мной (пока я жив), запустить несколько моих копий/бэкапов, я сомневаюсь, что я буду их осознавать, как себя, как несколько людей одновременно. Я весьма уверен что для моего самосознания ничего не изменится. Каждый будет отдельной личностью и для меня они будут другими людьми, пусть и идентичными мне (во время бэкапа, потом все будут отличаться со временем), а когда я буду умирать, моё сознание будет, вероятно, окончательно пропадать из этого мира, и для меня он перестанет существовать (точнее, конечно, наоборот), и мне будет достаточно пофиг на то что там есть какие-то бэкапы.
Суть там была в том, что люди научились копировать сознание, просто, быстро, без проблем. И заботиться о физической оболочке нужды не было. После очередной аварии люди садятся в машины раз два… А ничего не случилось, по их мнению, по крайней мере. А вот другие они уже дома.
Поэтому я хоть и техно энтузиаст и двумя протезами за кибернетизацию, но всё же остаётся вопрос, а после моего резервного копирования это буду я?
//Пробовал писать на вы, но как-то не звучит «вы» в этом контексте.
Я подумал, и решил для себя признать все свои копии собой. Это улучшает мои шансы в достижении моих целей и расширяет мои возможности.
а после моего резервного копирования это буду я?Парадокс корабля Тесея каждый решает для себя сам.
Рабочее предположение цифрового бессмертия, насколько я могу судить, состоит в том, что в случае смерти и восстановления из бэкапа у сознания не будет инструментов для определения этого факта. То есть «Вы» из бэкапа будете ощущать себя тем же самым «Собой», поскольку отсутствует возможность для различения)
Можно ли взять некий «черный ящик наоборот» (ЧЯ), т.е. некую конструкцию, содержащую например не обученную цифровую нейронную сеть, и, прицепив входы и выходы к реальному элементу нервной сети (нейрону), «обучить» этот ЧЯ на достаточно точное повторение работы элемента (нейрона)?
А то же самое с небольшим участком мозга?
В машинном обучении это называется дистилляцией модели. Таким образом, из известной и тяжелой NLP модели (трансформера) BERT, получили Distilbert, который гораздо легче, но показывает ненамного хуже результаты на аналогичных задачах.
Правильно ли я понял, что к BERT прицепили ЧЯ и обучили его повторять за BERT и получили Distilbert?
А BERT в это время был в специальном режиме для обучения ЧЯ, или в рабочем режиме, выполнял свои стандартные функции? (Я думаю, в режиме обучения).
Правильно ли я понял, что к BERT прицепили ЧЯ и обучили его повторять за BERT и получили Distilbert?
Там чуть сложнее, но принцип такой, да. Ученика учат максимально точно повторять вероятности, которые учитель отдает на последних слоях модели. При этом середина может быть произвольной (для дистилляции её делают проще).
А BERT в это время был в специальном режиме для обучения ЧЯ, или в рабочем режиме, выполнял свои стандартные функции? (Я думаю, в режиме обучения).
Учитель в этот момент заморожен (в режиме вывода — inference). Обучается только ученик.
Я имею ввиду, какой-то из вариантов:
- учитель мог целенаправленно обучать ученика, т.е. например обрабатывать большой массив входных данных только для того, чтобы ученик обучился; другой цели у учителя при этом не было;
- Либо учитель мог стоять на штатном боевом посту и заниматься своим прямым делом, ну не знаю — распознавать тексты или писать статьи… а ученик в это время «подглядывает» и обучается.
Можно ли воссоздать полную нейросеть мыши из тонких послойных разрезов мозга?