Обновить

Робот с LLM, который меня подстрелил. Часть 3

Уровень сложностиСредний
Время на прочтение58 мин
Охват и читатели8.3K
Всего голосов 10: ↑10 и ↓0+12
Комментарии3

Комментарии 3

Классная у вас статья, а по улице ИИ ехать сможет и управлять роботом не по шагам а что-бы ехал к цели без остановок?

В теории ехать по улице сможет, но медленно.

Это всё больше на пошаговую стратегию похоже.

Хороший проект, если честно если бы не обеденный перерыв не осилил бы столько текста.

Глядя на эксперименты с лидером искренне надеялся что Вы придёте к логике высокоуровневых команд, когда модель будет возвращать не "move forward", а "goal point: x/y", да, SLAM кажется громоздким, но Nav2 стек умеет строить A*, это приблизило бы "реальное время".

Step2: LLM может нарисовать bounding box для легковесной YOLO или даже классического CV алгоритма, который будет держать пистолет наведённым на этот объект. Логика близка к вашему zoom.

Ключевой фактор - от llm бесполезно требовать скорость инференса, но в ключе принятия решений она обходит классические детерминированные алгоритмы. Именно это качество и нужно использовать оградив от рутины исполнения.

Не останавливайтесь и успехов в реализации задуманного!

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Публикации