Nvidia представила программную платформу GR00T (Generalist Robot 00 Technology) для роботов-гуманоидов. ИИ позволит им понимать человеческий язык и имитировать человеческие движения.

GR00T презентовали на мероприятии GTC компании в Сан-Хосе.

Компьютерная модель позволит производителям создавать роботов, способных взаимодействовать с людьми и перемещаться в реальной среде. «ChatGPT для роботов может быть не за горами», — добавил генеральный директор Nvidia Дженсен Хуанг.

GR00T позволит компаниям полагаться на заранее запрограммированные команды для своих ботов. Модель принимает текст и видео в качестве входных данных. Таким образом, в неё можно загружать видеоклипы, изображающие движения человека. Затем модель учится воспроизводить действие в виртуальной симуляции.

Обучение будет происходить на базе приложения Isaac Lab на платформе Isaac Sim, специально созданного для работы с роботами. Оно оптимизирует обучение с подкреплением, имитацией и переносом и способно обучать все типы роботов.

В процессе используется OSMO — облачная платформа оркестрации рабочих процессов, которая позволяет легко масштабировать рабочие нагрузки в распределённых средах — от локальных до кластеров. OSMO координирует рабочие нагрузки обучения и вывода в системах DGX для обучения, OVX для моделирования, IGX и AGX для аппаратного обеспечения.

Ранее OpenAI, которая обучает свои модели ИИ на графических процессорах Nvidia, и стартап Fig продемонстрировали, как робот-гуманоид может полноценно общаться с человеком благодаря интеграции ChatGPT.

Nvidia также разработала Jetson Thor — систему-на-чипе, которая может запускать GR00T и другие компьютерные модели, предназначенные для роботов-гуманоидов. Jetson Thor будет оснащен графическим процессором на базе архитектуры Blackwell.

Nvidia отметила, что уже создаёт платформы искусственного интеллекта для ведущих компаний в области робототехники, включая Boston Dynamics, Fig и Agility Robotics.

Между тем Фонд робототехники с открытым исходным кодом запустил Альянс робототехники с открытым исходным кодом (OSRA), «новую инициативу, направленную на усиление управления проектами программного обеспечения для робототехники с открытым исходным кодом и обеспечение работоспособности операционной системы роботов». Nvidia вошла в число участников OSRA наряду с Intrinsic, Qualcomm, Apex, Clearpath Robotics, Ekumen, eProsima, PickNik, Silicon Valley Robotics и Zettascale.

Nvidia представила базовую ИИ-модель GR00T для роботов-гуманоидов