Разработчики из DeepMind (входит в Google) создали робота под названием RoboCat с искусственным интеллектом. Создатели надеются, что робот даст большой скачок миру самообучающихся автоматов.
![](https://habrastorage.org/getpro/habr/upload_files/cc9/a96/24c/cc9a9624cce6ea1c92006138ecf3b7b9.png)
DeepMind использовала для разработки робота большие языковые модели (Large Language Models — LLM). Команда разработчиков заявила, что добилась у RoboCat прорыва в освоении новых задач, а также улучшения производительности за счёт построения роботом собственных данных о ней. Чем больше новых задач робот усваивает, тем лучше он осваивает дополнительные задачи.
Роботы выполняли заранее запрограммированные конкретные задачи. С внедрением больших языковых моделей набор навыков робота начал расширяться, хотя обучение работе с огромными объёмами данных требовало больше времени.
![](https://habrastorage.org/getpro/habr/upload_files/686/fec/d41/686fecd4128f507d38d21b4f9bff644d.png)
В DeepMind заявили, что RoboCat может быстро осваивать новые задачи, например, вставлять кусочки головоломки различной формы в соответствующие отверстия или класть фрукты в вазу. Самое важное в обучении RoboCat — он сам научился управлять различными роботизированными руками в течение нескольких часов. Его обучали работе с рукой, имеющей двупалый захват, робот смог адаптироваться к руке с трёхпалым захватом и в 2 раза большим количеством управляемых входов.
RoboCat учился на различных типах обучающих данных и задачах: видеороликах с реальной роботизированной рукой, собирающей шестерёнки, имитирующей руку, укладывающей блоками. Благодаря этим знаниям RoboCat использовал роботизированную руку, чтобы поднять огурец.
Робот улучшил свои характеристики со 100 до 1000 демонстраций с помощью роботизированной руки, управляемой человеком. Затем дополнительные модели были обучены конкретным задачам, и эти данные были внесены в общий пул инструкций. Изначально RoboCat достиг 36% успеха в решении задач, ранее не изученных им, но благодаря самообучению показатель успеха увеличился до 72%.