Рассказывая о видеоочках Epson Moverio, зачастую сталкиваемся со скепсисом (как в комментариях, так и в сообщениях в «личку»): «Ваши очки – просто дорогая игрушка. Ну или в «Pokemon go» сыграть, разве что». Или, как изящно отметил один наш читатель, — «ювелирная свистелка»:
Поэтому, покопавшись в интернете, решил собрать реальные кейсы со всего мира, которые показывают, насколько такое устройство (не обязательно производства Epson) может быть полезно там, где нужно освободить руки сотрудников, повысить эффективность работы и снизить риск «человеческой ошибки».
Постарался выбрать самые интересные проекты из нескольких сфер: логистика, медицина, техподдержка, авиастроение и помощь людям с ограниченными возможностями.
VR или AR?
На всякий случай начну с разделения понятий VR и AR. Обе технологии преследуют свои цели и подходят для разных задач.
Задача виртуальной реальности — перенести пользователя в полностью искусственно созданный мир. Ее чаще всего используют для проектов симуляции и игр. Именно поэтому максимальный эффект погружения ощущается в специальном шлеме, блокирующем большую часть сигналов извне. VR бывает стационарный и мобильный, в том числе используются необычные гаджеты вроде очков с зеркалами.
Дополненная реальность — легко догадаться, о чем речь, если вспомнить фильм «Железный человек». Все необходимые показатели выводились на стекле шлема Тони, при этом сам дисплей был прозрачным.
Сведем основные моменты в простенькую таблицу:
| VR | AR | |
| Устройства | Шлем (+смартфон), контроллер (+трекеры) | Смартфон, планшет, видеооочки |
| Основное направление | Игры, симуляции, отработка навыков | Игры, наглядные руководства, визуальная инспекция, обслуживание оборудования |
| Возможность передвижения | В большинстве стационарных VR-шлемов есть провода. Они должны быть достаточно длинными, чтобы не сильно ограничивать передвижение, и прочными, потому что понятно, почему. Для перемещения необходима дополнительная настройка под параметры помещения. Требуется корректное размещение сенсоров, калибровка и последующая настройки шлема. Мобильные VR-шлемы лишены этих проблем, но можно во что-нибудь врезаться. Ситуация меняется в лучшую сторону с выходом Oculus Quest и Rift S со встроенными камерами. Внимательно наблюдаем. |
Дисплеи очков прозрачны, поэтому пользователь видит все происходящее вокруг. Однако в инструкции к нашим очкам, например, прописано, что машину в них водить запрещено. Хотя, если подумать, я и в шлеме не стал бы садиться за руль… Планшет или телефон необходимо держать перед глазами, глядя на экран с проекцией поверх картинки с камеры. |
| Физический комфорт | Множество неудобств, начиная нежеланием портить прическу, заканчивая тем, что у многих пользователей под маской потеет лицо. От продолжительной носки VR-шлема сильно устают глаза и шея. Про головокружение и шок вестибулярного аппарата при перемещении в виртуальном пространстве без перемещения в реальном рассказывать не буду – кто пробовал, знают, каково это пережить такое «укачивание». |
AR-очки значительно легче, быстрее надеваются/снимаются, в последних релизах наших, к примеру, хорошо крепятся, так что не «слетают» с головы даже при самых сильных наклонах головы. Благодаря тому, что прозрачные, нет «буэ-э»-эффекта при перемещении, т.к. реальное окружающее пространство всегда перед глазами. Это одна из причин, кстати, почему в профсреде используются именно AR-очки, а не шлемы: не придется искать человека с крепкой «вестибуляркой» – практически любой справится. |
Углубляться в описание самих очков не буду, уже неоднократно о них рассказывали. Например, тут (Epson BT-200), тут (Epson BT-300) и тут (Epson BT-35E).
Два основных типа применения AR «в деле»
Первое — демонстрация информации. Оператор работает с предустановленными руководствами, наглядно показывающими процесс сборки, разборки, ТО чего-либо или просматривает заранее загруженные данные, которые в прямом смысле должны быть перед глазами.
Второе – удаленная поддержка во внештатных ситуациях. В режиме реального времени удаленный специалист видит изображение со встроенной камеры и отправляет интерактивные подсказки и направляет пользователя в его действиях.
Важно отметить, что возможности приложения зависят исключительно от ПО, разработанного под конкретную задачу. Именно поэтому все версии очков Epson, например, имеют открытый SDK.
Перейдем уже к интересным кейсам по основным категориям, а то утомил уже, наверное!
Логистика
Несколько лет назад компания DHL протестировала дополненную реальность на складе в Берген-оп-Зом (Нидерланды), где сотрудникам выдали смарт-очки. На дисплеях очков отображался маршрут к товару и только те товары, которые нужно было собрать в конкретный заказ. Пилотный проект показал отличные результаты: логистика и процесс выбора стали эффективнее на 25%.
Кстати, смарт-очки с функцией дополненной реальности пригодились бы и в компаниях, на складах которых хранится огромное количество разноименных артикулов, или там, где часто нанимают временных рабочих. Для того чтобы освоиться и узнать, где и что находится нужно время, соответственно, применение такого «помощника» имеет большой потенциал.
Кстати, отличное решение для Почты России…
ST Logistics and MGG Software разработали приложение, которое как раз обеспечивает подобные возможности:
Медицина
В 2017 году хирурги испанской клиники Gregorio Marañon первыми в мире использовали очки дополненной реальности для выполнения операции. Врач мог видеть историю болезни, данные анализов и монитора пациента, рентгеновские снимки, МРТ, КТ, а также управлять данными движениями руки. Встроенная камера записываела происходящее в операционной и транслировала видеопоток на мониторы для обучения интернов.
Другой интересный кейс также из области хирургии – проведение эндоваскулярной операции в видеоочках дополненной реальности (видео по ссылке, т.к. для него почему-то запрещен имбеддинг на сторонних ресурсах).
Кстати, проводилась операция с помощью Epson Moverio BT-35E, о которых мы недавно рассказывали на Хабре.
Эндоваскулярная хирургия представляет собой относительно новое, но очень перспективное направление в современной медицине. Основное ее преимущество — малоинвазивность, когда для доступа к сложным анатомическим структурам или внутренним органам достаточно лишь небольшого кожного разреза и введения проводника через сосуд.
К сожалению, поскольку сама тема для меня совершенно непрофильная – прокомментировать сложно. Возможно, хабраэксперты помогут в комментариях к посту.
Стоматологи тоже «в теме»
Стоматологи не отстают от коллег и используют дополненную реальность в повседневных процедурах. Например, при протезировании. Врач использует специальный стик с HD-видеокамерой для сканирования участка, требующего протезирования. На основании отсканированной трехмерной модели протезист создает компьютерные образы коронок и мостовидных конструкций.
Неудобство процесса состоит в том, что изображение с камеры передается на внешний монитор, обычно располагающийся сбоку от врача (видимо, не у всех врачей есть возможность поставить его перед глазами): поэтому ему необходимо постоянно поворачиваться во время сканирования то к пациенту, то к экрану. Это отвлекает и может доставлять определенные неудобства пациенту. ПО EyeCad выводит изображение с камеры сканера сразу на дисплеи очков, таким образом врач смотрит и на пациента, и видит рабочую область. Разработчики также предусмотрели управление жестами.
Другой пример – приложение ICNOS – позволяет пациенту поддерживать коммуникацию с врачом. Если во время лечения пациенту необходимо что-то сказать врачу, например, что ему необходим перерыв, или спросить, сколько времени осталось до конца процедуры, то он может сделать это, используя специальное приложение, которое при помощи Bluetooth-соединения с динамиком воспроизводит заданный текст.
А, если пациент заскучает, то может посмотреть новую серию любимого сериала или «посерфить» в интернете.
Удаленная техподдержка и ТО
Российский промышленный гигант СИБУР разрабатывает индустриальную AR-платформу на базе технологий дополненной реальности. По замыслу разработчиков решение позволит специалисту получать оперативную поддержку при проведении ТО и ремонта от территориально удаленных внутренних и внешних экспертов.
В своем блоге «Цифровой СИБУР» они подробно рассказывают о перспективах и сложностях, с которыми сталкиваются при внедрении решения.
А сотрудники колумбийского университета провели исследование с целью оценить преимущества дополненной реальности при обслуживании турели бронетранспортёра (“Evaluating the Benefits of Augmented Reality for Task Localization in Maintenance of an Armored Personnel Carrier Turret”). Вроде даже успешно.
Авиастроение
Военно-промышленная корпорация Lockheed Martin (США), выпускающая авиационную технику, ввела в арсенал своих инженеров очки дополненной реальности со специально разработанным приложением. С их помощью значительно упростилась задача информационной поддержки специалистов — в процессе сборки техник видит на экране данные о том, куда и как требуется подключить необходимую деталь. Компания NGRAIN, которая занималась внедрением этого оборудования, подсчитала, что благодаря такому решению рабочие тратят на 30% меньше времени на выполнение задач, а точность труда повысилась на целых 96%.
Помощь людям с ограниченными возможностями
Для слабослышащих при помощи AR-устройств возможно визуализировать или переводить в текстовый формат звуковую информацию. Так в Астраханском краеведческом Музее доступна версия экскурсии с сурдопереводом.
А Национальный британский театр совместно с партнером по инновациям – агентством Accenture и компанией StageText разработали проект, в котором видеоочки дополненной реальности Epson Moverio BT-350 используются для вывода синхронизированной с постановками транскрипции диалогов и звуков на дисплеи очков.
Технология Open Access Smart Capture использует программное обеспечение, распознающее речь и синхронизирующего титры с текстом постановки. Для точной калибровки программа считывает световые, звуковые и видео метки, уникальные для каждой постановки. Зрители могут настраивать размер шрифта, цвет и расположение титров на свое усмотрение.
Специалисты продолжают совершенствовать проект. В настоящее время дорабатывается программное обеспечение, с тем чтобы очки можно было использовать для формирования титров в режиме реального времени.
Для людей с ограниченными физическими возможностями устройства дополненной реальности смогут создавать информационные карты доступной среды, позволят составлять удобные маршруты, предупреждать о труднопроходимых или труднодоступных местах.
Вместо вывода
Примеры, которые удалось найти – это лишь демонстрация малой части возможностей, которые открывают гаджеты дополненной реальности. Epson предлагает видеоочки дополненной реальности, с помощью которых становится возможно реализовать многое из того, о чем рассказывалось в посте.
Возможно, и вы найдете им применение в своем следующем AR-проекте?
