Привет, Хабр! Это первая статья уже в блоге M2 Holo Lab. До этого я писал со своего аккаунта: сначала как крутить 3D-модели голыми руками через обычную вебку, потом про мозг, мышь, дом и ДНК.

Если вкратце: M2 это 3D-лаборатория в браузере. Камера следит за руками, а ты жестами крутишь, разбираешь и собираешь модели. Руки распознаёт MediaPipe, рисует Three.js, видео с камеры никуда не уходит.

После прошлых статей мне стали писать учителя, и сейчас у меня планируется пилот со школой. И вот тут вылезла проблема, о которой я дома даже не думал. Учитель стоит перед камерой, а за спиной у него сидит класс. У каждого тоже есть руки, и камера видит их все.

Ниже расскажу, как я научил M2 слушаться только того, кто ведёт урок. Без датчиков глубины, без второй камеры и без новой нейронки. Только те же 21 точка на руку, что и раньше.

В прошлой статье я рассказывал, как сделал голографический верстак на обычной вебке: разбираешь турбину или достаёшь сердце из человека голыми руками, без шлема и датчиков. Спасибо всем, кто читал и писал в комменты. Чаще всего спрашивали одно: а что ещё так можно разобрать?

Недавно я выкатил большое обновление: мозг, мышь, каркасный дом и ДНК. Расскажу, откуда я брал каждую модель, что пришлось выкинуть и почему половину из них проще было написать кодом, чем найти.

Сделал в браузере голографический верстак: на обычной вебке разбираю турбину, собираю молекулы и достаю органы из 3D-модели человека голыми руками, без шлема и датчиков глубины. Рассказываю, во что упирается hand tracking на простой камере и какие решения сработали.