Привет снова, Хабр!

Помните моего робота на Arduino Uno Q с характером? Того, который умел подмигивать и обижаться? Так вот, за пару месяцев он серьезно прокачался. Теперь он не просто ездит и болтает, а:

- 🎤 Слушает ответы после того, как сам поговорил (и отправляет их в LLM для контекста!)

- 🌈 Светится разными цветами в зависимости от настроения (красный = злой, зеленый = радостный, синий = думает)

- 🗣️ Говорит на трех языках (английский, русский, чешский) голосами WaveNet от Google

- 🗺️ Рисует карту комнаты прямо в текстовом режиме

- 🧠 Помнит свои движения, чтобы не застревать в углах как пылесос из 2005-го

В этой статье я расскажу, как превратить простого робота в почти разумное существо, используя мультимодальный Gemini API, и почему мой робот теперь умнее некоторых людей (шутка... или нет?).

Привет, Хабр!

Вы когда-нибудь мечтали о роботе, который не просто выполняет команды «едь прямо» или «поверни налево», а может обидеться на вас за глупый вопрос или радостно подмигнуть, увидев кота? Я тоже. И решил, что хватит мечтать — пора собирать.