Множество исследований в области искусственного интеллекта сталкиваются с проблемой отсутствия на сегодняшний момент какой-либо мощной теории сознания и мозговой активности. Фактически мы обладаем достаточно скудными знаниями о том каким образом мозг обучается и достигает адаптивного результата. Однако, на данный момент происходит заметное увеличение взаимовлияния области искусственного интеллекта и нейробиологии. По результатам математического моделирования мозговой активности ставятся новые цели для экспериментов в области нейробиологии и психофизиологии, а экспериментальные данные биологов в свою очередь во многом влияют на вектор развития ИИ.
Исходя из вышесказанного становится ясно, что для будущего успешного развития бионического ИИ необходимо плотное сотрудничество математиков и нейробиологов, которое в итоге будет плодотворным для обеих областей. Для этого в частности необходимо изучение современных успехов теоретической нейробиологии.
На данный момент существуют три наиболее проработанных и отчасти экспериментально проверенных теории строения сознания в области теоретической нейробиологии: теория функциональных систем П.К. Анохина, теория селекции нейрональных групп (нейродарвинизм) Джеральда Эдельмана и теория глобальных информационных пространств Жана-Пьера Шанже (изначально сформулирована Бернардом Баарсом). Остальные теории либо являются модификациями названных, либо не подтверждены никакими экспериментальными данными. В данной статье речь пойдет о первой из этих теорий — Теории функциональных систем П.К. Анохина.
В первую очередь необходимо сказать о том, что при всем многообразии теорий и подходов, используемых в психологии, психофизиологии и нейронауках, их можно условно разделить на две группы. В первой группе в качестве основного методологического принципа, определяющего подход к исследованию закономерностей мозговой организации поведения и деятельности, рассматривается реактивность, во второй — активность [1] (рис. 1).
![image](https://habrastorage.org/r/w780q1/getpro/geektimes/post_images/226/80c/da8/22680cda84f935eebbc623cc52365b48.jpg)
Рис. 1. Две парадигмы нейрофизиологии — реактивность и активность
В соответствии с парадигмой реактивности за стимулом следует реакция – поведенческая у индивида, импульсная у нейрона. В последнем случае в качестве стимула рассматривается импульсация пресинаптического нейрона.
В соответствии с парадигмой активности действие завершается достижением результата и его оценкой. В схему включается модель будущего результата: для человека, например, контакт с объектом-целью [2].
Согласно реактивностному подходу, агент не должен проявлять активность в отсутствии стимулов. Напротив, при использовании парадигмы активности мы можем допустить случай, когда агенту не поступило никакого стимула из внешней среды, однако, согласно ожиданиям агента он должен был поступить. В этом случае агент будет действовать и обучаться для устранения рассогласования, чего не может бы быть в случае простейшего безусловного ответа агента на стимул из внешней среды.
В теории функциональных систем в качестве детерминанты поведения рассматривается не прошлое по отношению к поведению событие — стимул, а будущее – результат [3]. Функциональная система есть динамически складывающаяся широкая распределенная система из разнородных физиологических образований, все части которой содействуют получению определенного полезного результата [4]. Именно опережающее значение результата и модель будущего, создаваемая мозгом, позволяет говорить не о реакции на стимулы из внешней среды, а о полноценном целеполагании.
![image](https://habrastorage.org/r/w780q1/getpro/geektimes/post_images/991/a96/0c8/991a960c8cb8efc8ed0c62700754ad80.jpg)
Рис. 2. Общая архитектура функциональной системы [4]
(ОА – обстановочная афферентация, ПА – пусковая афферентация)
Архитектура функциональной системы приведена на рис. 2. На схеме представлена последовательность действий при реализации одной функциональной системы. Вначале происходит афферентный синтез, который аккумулирует сигналы из внешней среды, память и мотивацию субъекта. На основе афферентного синтеза принимается решение, на основе которого формируется программа действий и акцептор результата действия – прогноз результативности совершаемого действия. После чего непосредственно совершается действие и снимаются физические параметры результата. Одной из самых важных частей данной архитектуры является обратная афферентация – обратная связь, которая позволяет судить об успешности того или много действия. Это непосредственно позволяет субъекту обучаться, так как сравнивая физические параметры полученного результата и предсказанного результата, можно оценивать результативность целенаправленного поведения. Причем небходимо отметить, что на выбор того или иного действия влияет очень много факторов, совокупность которых обрабатывается в процессе афферентного синтеза.
Такие функциональные системы вырабатываются в процессе эволюции и обучения в течение жизни. Если обобщать, то вся цель эволюции – это выработка функциональных систем, которые будут давать наилучший приспособительный эффект. Функциональные системы, вырабатываемые эволюцией, развиваются еще до рождения, когда нету прямого соприкосновения со средой, и обеспечивают первичный репертуар. Именно этот факт указывает на эволюционную природу этих явлений. Такие процессы получили общее название – первичный системогенез [5].
Системно-эволюционная теория, разработанная Швырковым В.Б. на основе теории функциональных систем, отвергала даже понятие «пускового стимула» и рассматривала поведенческий акт не изолировано, а как компоненту поведенческого континуума: последовательности поведенческих актов, совершаемых индивидом на протяжении его жизни (рис. 3) [6]. Следующий акт в континууме реализуется после достижения и оценки результата предыдущего акта. Такая оценка – необходимая часть процессов организации следующего акта, которые, таким образом, могут быть рассмотрены как трансформационные или процессы перехода от одного акта к другому [7].
![image](https://habrastorage.org/r/w780q1/getpro/geektimes/post_images/a3a/04a/734/a3a04a7346d0c7f0abbd9c976ae1b7cf.jpg)
Рис. 3. Поведенчески-временной континуум
Из всего вышесказанного следует, что индивид, и даже отдельный нейрон, должны обладать способностью вырабатывать образ результата действия и возможностью оценивать результативность своего поведения. При выполнении этих условий поведение можно с уверенностью называть целенаправленным.
Однако, процессы системогенеза происходят в мозге не только в развитии (первичный системогенез), но и в течение жизни субъекта. Системогенез – это образование новых систем в процессе обучения. В рамках системно-селекционной концепции научения — формирование новой системы — рассматривается как формирование нового элемента индивидуального опыта в процессе научения. В основе формирования новых функциональных систем при научении лежит селекция нейронов из «резерва» (предположительно низко активных или «молчащих» клеток). Эти нейроны могут быть обозначены как преспециализированные клетки [8].
Селекция нейронов зависит от их индивидуальных свойств, т.е. от особенностей их метаболических «потребностей». Отобранные клетки становятся специализированными относительно вновь формируемой системы – системно-специализированными. Эта специализация нейронов относительно вновь формируемых систем постоянна. Таким образом, новая система оказывается «добавкой» к ранее сформированным, «наслаиваясь» на них. Этот процесс называется вторичным системогенезом [9].
Следующие положения системно-эволюционной теории:
• о наличии в мозге животных разных видов большого числа «молчащих» клеток;
• об увеличении количества активных клеток при обучении;
• о том, что вновь сформированные специализации нейронов остаются постоянными
• что при научении происходит скорее вовлечение новых нейронов, чем переобучение старых,
согласуются с данными, полученными в работах ряда лабораторий [10].
Отдельно хотелось бы отметить, что согласно современным представлениям психофизиологии и системно-эволюционной теории количество и состав функциональных систем индивида определяется как процессами эволюционной адаптации, которые отражаются в геноме, так и индивидуальным прижизненным обучением.
Теория функциональных систем успешно исследуется путем имитационного моделирования и на ее основе строятся различные модели управления адаптивным поведением [11,12].
Теория функциональных систем в свое время первой ввела понятие целенаправленности поведения за счет сравнения предсказания результата с фактическими его параметрами, а также обучение как способ устранения рассогласования организма со средой. Многие положения данной теории уже сейчас нуждаются в существенном пересмотре и адаптации с учетом новых экспериментальных данных. Однако на сегодняшний момент данная теория входит в число наиболее проработанных и биологически адекватных.
Хотелось бы еще раз отметить, что с моей точки зрения дальнейшее развития области ИИ невозможно без тесного сотрудничества с нейробиологами, без построения новых моделей на основе мощных теорий.
[1]. Александров Ю.И. «Введение в системную психофизиологию». // Психология XXI века. М.: Пер Се, стр. 39-85 (2003).
[2]. Александров Ю.И., Анохин К.В. и др. Нейрон. Обработка сигналов. Пластичность. Моделирование: Фундаментальное руководство. Тюмень: Издательство Тюменского Государственного Университета (2008).
[3]. Анохин П.К. Очерки по физиологии функциональных систем. М.: Медицина (1975).
[4]. Анохин П.К. «Идеи и факты в разработке теории функциональных систем». // Психологический журнал. Т.5, стр. 107-118 (1984).
[5]. Анохин П.К. «Системогенез как общая закономерность эволюционного процесса». // Бюллетень экпериментальной биологии и медицины. № 8, т. 26 (1948).
[6]. Швырков В.Б. Введение в объективную психологию. Нейрональные основы психики. М.: Институт психологии РАН (1995).
[7]. Александров Ю.И. Психофизиология: Учебник для вузов. 2-е изд. Спб.: Питер (2003).
[8]. Александров Ю.И. «Научение и память: системная перспектива». // Вторые симоновские чтения. М.: Изд. РАН, стр. 3-51 (2004).
[9]. Теория системогенеза. Под. ред. К.В.Судакова. М.: Горизонт (1997).
[10]. Jog M.S., Kubota K, Connolly C.I., Hillegaart V., Graybiel A.M. «Bulding neural representations of habits». // Science. Vol. 286, pp. 1745-1749 (1999).
[11]. Red'ko V.G., Anokhin K.V., Burtsev M.S., Manolov A.I., Mosalov O.P., Nepomnyashchikh V.A., Prokhorov D.V. «Project «Animat Brain»: Designing the Animat Control System on the Basis of the Functional Systems Theory» // Anticipatory Behavior in Adaptive Learning Systems. LNAI 4520, pp. 94-107 (2007).
[12]. Red'ko V.G., Prokhorov D.V., Burtsev M.S. «Theory of Functional Systems, Adaptive Critics and Neural Networks» // Proceedings of IJCNN 2004. Pp. 1787-1792 (2004).
Исходя из вышесказанного становится ясно, что для будущего успешного развития бионического ИИ необходимо плотное сотрудничество математиков и нейробиологов, которое в итоге будет плодотворным для обеих областей. Для этого в частности необходимо изучение современных успехов теоретической нейробиологии.
На данный момент существуют три наиболее проработанных и отчасти экспериментально проверенных теории строения сознания в области теоретической нейробиологии: теория функциональных систем П.К. Анохина, теория селекции нейрональных групп (нейродарвинизм) Джеральда Эдельмана и теория глобальных информационных пространств Жана-Пьера Шанже (изначально сформулирована Бернардом Баарсом). Остальные теории либо являются модификациями названных, либо не подтверждены никакими экспериментальными данными. В данной статье речь пойдет о первой из этих теорий — Теории функциональных систем П.К. Анохина.
Парадигмы реактивности и активности
В первую очередь необходимо сказать о том, что при всем многообразии теорий и подходов, используемых в психологии, психофизиологии и нейронауках, их можно условно разделить на две группы. В первой группе в качестве основного методологического принципа, определяющего подход к исследованию закономерностей мозговой организации поведения и деятельности, рассматривается реактивность, во второй — активность [1] (рис. 1).
![image](https://habrastorage.org/getpro/geektimes/post_images/226/80c/da8/22680cda84f935eebbc623cc52365b48.jpg)
Рис. 1. Две парадигмы нейрофизиологии — реактивность и активность
В соответствии с парадигмой реактивности за стимулом следует реакция – поведенческая у индивида, импульсная у нейрона. В последнем случае в качестве стимула рассматривается импульсация пресинаптического нейрона.
В соответствии с парадигмой активности действие завершается достижением результата и его оценкой. В схему включается модель будущего результата: для человека, например, контакт с объектом-целью [2].
Согласно реактивностному подходу, агент не должен проявлять активность в отсутствии стимулов. Напротив, при использовании парадигмы активности мы можем допустить случай, когда агенту не поступило никакого стимула из внешней среды, однако, согласно ожиданиям агента он должен был поступить. В этом случае агент будет действовать и обучаться для устранения рассогласования, чего не может бы быть в случае простейшего безусловного ответа агента на стимул из внешней среды.
Теория функциональных систем
В теории функциональных систем в качестве детерминанты поведения рассматривается не прошлое по отношению к поведению событие — стимул, а будущее – результат [3]. Функциональная система есть динамически складывающаяся широкая распределенная система из разнородных физиологических образований, все части которой содействуют получению определенного полезного результата [4]. Именно опережающее значение результата и модель будущего, создаваемая мозгом, позволяет говорить не о реакции на стимулы из внешней среды, а о полноценном целеполагании.
![image](https://habrastorage.org/getpro/geektimes/post_images/991/a96/0c8/991a960c8cb8efc8ed0c62700754ad80.jpg)
Рис. 2. Общая архитектура функциональной системы [4]
(ОА – обстановочная афферентация, ПА – пусковая афферентация)
Архитектура функциональной системы приведена на рис. 2. На схеме представлена последовательность действий при реализации одной функциональной системы. Вначале происходит афферентный синтез, который аккумулирует сигналы из внешней среды, память и мотивацию субъекта. На основе афферентного синтеза принимается решение, на основе которого формируется программа действий и акцептор результата действия – прогноз результативности совершаемого действия. После чего непосредственно совершается действие и снимаются физические параметры результата. Одной из самых важных частей данной архитектуры является обратная афферентация – обратная связь, которая позволяет судить об успешности того или много действия. Это непосредственно позволяет субъекту обучаться, так как сравнивая физические параметры полученного результата и предсказанного результата, можно оценивать результативность целенаправленного поведения. Причем небходимо отметить, что на выбор того или иного действия влияет очень много факторов, совокупность которых обрабатывается в процессе афферентного синтеза.
Такие функциональные системы вырабатываются в процессе эволюции и обучения в течение жизни. Если обобщать, то вся цель эволюции – это выработка функциональных систем, которые будут давать наилучший приспособительный эффект. Функциональные системы, вырабатываемые эволюцией, развиваются еще до рождения, когда нету прямого соприкосновения со средой, и обеспечивают первичный репертуар. Именно этот факт указывает на эволюционную природу этих явлений. Такие процессы получили общее название – первичный системогенез [5].
Системно-эволюционная теория, разработанная Швырковым В.Б. на основе теории функциональных систем, отвергала даже понятие «пускового стимула» и рассматривала поведенческий акт не изолировано, а как компоненту поведенческого континуума: последовательности поведенческих актов, совершаемых индивидом на протяжении его жизни (рис. 3) [6]. Следующий акт в континууме реализуется после достижения и оценки результата предыдущего акта. Такая оценка – необходимая часть процессов организации следующего акта, которые, таким образом, могут быть рассмотрены как трансформационные или процессы перехода от одного акта к другому [7].
![image](https://habrastorage.org/getpro/geektimes/post_images/a3a/04a/734/a3a04a7346d0c7f0abbd9c976ae1b7cf.jpg)
Рис. 3. Поведенчески-временной континуум
Из всего вышесказанного следует, что индивид, и даже отдельный нейрон, должны обладать способностью вырабатывать образ результата действия и возможностью оценивать результативность своего поведения. При выполнении этих условий поведение можно с уверенностью называть целенаправленным.
Однако, процессы системогенеза происходят в мозге не только в развитии (первичный системогенез), но и в течение жизни субъекта. Системогенез – это образование новых систем в процессе обучения. В рамках системно-селекционной концепции научения — формирование новой системы — рассматривается как формирование нового элемента индивидуального опыта в процессе научения. В основе формирования новых функциональных систем при научении лежит селекция нейронов из «резерва» (предположительно низко активных или «молчащих» клеток). Эти нейроны могут быть обозначены как преспециализированные клетки [8].
Селекция нейронов зависит от их индивидуальных свойств, т.е. от особенностей их метаболических «потребностей». Отобранные клетки становятся специализированными относительно вновь формируемой системы – системно-специализированными. Эта специализация нейронов относительно вновь формируемых систем постоянна. Таким образом, новая система оказывается «добавкой» к ранее сформированным, «наслаиваясь» на них. Этот процесс называется вторичным системогенезом [9].
Следующие положения системно-эволюционной теории:
• о наличии в мозге животных разных видов большого числа «молчащих» клеток;
• об увеличении количества активных клеток при обучении;
• о том, что вновь сформированные специализации нейронов остаются постоянными
• что при научении происходит скорее вовлечение новых нейронов, чем переобучение старых,
согласуются с данными, полученными в работах ряда лабораторий [10].
Отдельно хотелось бы отметить, что согласно современным представлениям психофизиологии и системно-эволюционной теории количество и состав функциональных систем индивида определяется как процессами эволюционной адаптации, которые отражаются в геноме, так и индивидуальным прижизненным обучением.
Теория функциональных систем успешно исследуется путем имитационного моделирования и на ее основе строятся различные модели управления адаптивным поведением [11,12].
Вместо заключения
Теория функциональных систем в свое время первой ввела понятие целенаправленности поведения за счет сравнения предсказания результата с фактическими его параметрами, а также обучение как способ устранения рассогласования организма со средой. Многие положения данной теории уже сейчас нуждаются в существенном пересмотре и адаптации с учетом новых экспериментальных данных. Однако на сегодняшний момент данная теория входит в число наиболее проработанных и биологически адекватных.
Хотелось бы еще раз отметить, что с моей точки зрения дальнейшее развития области ИИ невозможно без тесного сотрудничества с нейробиологами, без построения новых моделей на основе мощных теорий.
Список литературы
[1]. Александров Ю.И. «Введение в системную психофизиологию». // Психология XXI века. М.: Пер Се, стр. 39-85 (2003).
[2]. Александров Ю.И., Анохин К.В. и др. Нейрон. Обработка сигналов. Пластичность. Моделирование: Фундаментальное руководство. Тюмень: Издательство Тюменского Государственного Университета (2008).
[3]. Анохин П.К. Очерки по физиологии функциональных систем. М.: Медицина (1975).
[4]. Анохин П.К. «Идеи и факты в разработке теории функциональных систем». // Психологический журнал. Т.5, стр. 107-118 (1984).
[5]. Анохин П.К. «Системогенез как общая закономерность эволюционного процесса». // Бюллетень экпериментальной биологии и медицины. № 8, т. 26 (1948).
[6]. Швырков В.Б. Введение в объективную психологию. Нейрональные основы психики. М.: Институт психологии РАН (1995).
[7]. Александров Ю.И. Психофизиология: Учебник для вузов. 2-е изд. Спб.: Питер (2003).
[8]. Александров Ю.И. «Научение и память: системная перспектива». // Вторые симоновские чтения. М.: Изд. РАН, стр. 3-51 (2004).
[9]. Теория системогенеза. Под. ред. К.В.Судакова. М.: Горизонт (1997).
[10]. Jog M.S., Kubota K, Connolly C.I., Hillegaart V., Graybiel A.M. «Bulding neural representations of habits». // Science. Vol. 286, pp. 1745-1749 (1999).
[11]. Red'ko V.G., Anokhin K.V., Burtsev M.S., Manolov A.I., Mosalov O.P., Nepomnyashchikh V.A., Prokhorov D.V. «Project «Animat Brain»: Designing the Animat Control System on the Basis of the Functional Systems Theory» // Anticipatory Behavior in Adaptive Learning Systems. LNAI 4520, pp. 94-107 (2007).
[12]. Red'ko V.G., Prokhorov D.V., Burtsev M.S. «Theory of Functional Systems, Adaptive Critics and Neural Networks» // Proceedings of IJCNN 2004. Pp. 1787-1792 (2004).