AR и VR

Мы уже рассмотрели средства фотореалистичной визуализации и увидели потенциальный переход к средам с дополнительным эффектом присутствия благодаря возрождению интереса к виртуальной реальности (Virtual Reality, VR). Многие считают, что невероятный ажиотаж вокруг технологий виртуальной реальности в итоге перейдет в сферу дополненной реальности (Augmented Reality, AR).



Специалистам в области проектирования и разработки, даже тем, кому уже знаком этот термин, стоит еще раз обратиться к основам. В то время как под виртуальной реальностью понимается процесс создания полностью цифрового мира, в который может погрузиться пользователь, отличие технологий дополненной реальности в том, что они совмещают реальный мир с виртуальными артефактами, объектами или данными.

В этом дайджесте мы собрали интересные статьи, вышедшие за последние 2 года в журналах Университета ИТМО. Все материалы находятся в открытом доступе и охватывают темы, связанные с обработкой изображений (от расчетов объективов до автоматической корректировки изображения) и компьютерным моделированием различных процессов: начиная от работы светодиодного светильника и заканчивая моделированием поведения датчика индукционного лага на глубоководном судне.

Компания HTC, производитель шлема виртуальной реальности HTC Vive, запускает предзаказ беспроводного Wireless Kit, который возможно установить на уже существующие шлемы. Любителям виртуальной реальности «свобода от проводов» обойдется в $220. Правда заказ можно сделать только в китайском сегменте Vive.

Производителем беспроводного адаптера выступает компания TPCAST, которая разработала передатчик в рамках программы Vive X.

Vive X — проект компании HTC, в рамках которой она инвестировала порядка $100 млн в ВР-стартапы с целью обеспечить технологический рывок в данном направлении. Программа стартовала весной этого года и, как видно, уже принесла свои плоды.

Презентованная совсем недавно игра Pokemon Go с элементами дополненной реальности сумела привлечь внимание не только заурядных любителей развлечься, но и весьма сообразительных злоумышленников, нашедших нетривиальный способ использовать возможности нового проекта Niantic в корыстных целях. Подробнее о самом анонсе и «проблемах» Pokemon Go с законом мы расскажем в этой публикации.

Если вы когда-либо видели аниме Sword Art Online, вы, наверное, удивлялись, почему нет ММО-игры по мотивам серии. Герои, сюжет, окружение — все идеально подходит для создания такого рода приложения. Многие фанаты этого аниме неоднократно обращались к авторам проекта с просьбой разработать игрушку, но до некоторого момента просьбы оставались неуслышанными.

Но сейчас наступил момент истины — мало того, что по мотивам Sword Art Online создается огромный MMO-мир, так еще в создании этого мира принимает участие IBM Watson. Игра эта — одна из наиболее продвинутых технологически, и не только из-за участия в разработке и управлении игровым миром когнитивной системы, но и потому, что игровой мир — это виртуальная реальность.

Виртуальная реальность постепенно становится мейнстримом. Компания Lytro вышла на рынок в 2012 году, выпустив маленькую фотокамеру светового поля (пленоптическую камеру) за $150, которая записывает расстояние до всех объектов в кадре, так что можно менять глубину резкости уже после съёмки. Затем появилась более продвинутая Lytro Illum с мощным объективом, похожая на обычные цифровые «зеркалки».

Сейчас Lytro сделала серьёзный шаг вперёд и представила продукт совершенно иного класса: это профессиональная панорамная видеокамера светового поля для записи виртуальной реальности невиданного качества, с которым не сравнится ни один подобный продукт от других производителей. Lytro говорит о видеозаписи «с разрешением 2K на каждый глаз».

Привет, Гиктаймс!

Мы с вами живем в удивительное время. Новые Горизонты бороздят просторы солнечной системы, по Земле катаются автомобили-роботы, а музыкальным лейблам уже даже не нужны живые артисты для того, чтобы зарабатывать деньги и выдавать слушателям продукт – музыкальный или визуальный. И если с первым все понятно: старые записи, черновики легендарных музыкантов и просто неизданные в нужное время материалы могут работать на имя исполнителей еще очень долгое время, то с визуальной составляющей мы попытаемся разобраться. Кому, зачем и в каком виде понадобилось подменять себя на сцене голографической проекцией, и есть ли у этого вида искусства перспективы в музыкальном?

Предлагаю читателям Geektimes перевод статьи, которая написана Атманом Бинстоком, главным архитектором Oculus и техническим директором по разработке гарнитуры виртуальной реальности Rift.

Статья была опубликована достаточно давно – 15 мая 2015 года, и я был крайне удивлен тем, что тема ресурсоемкости итоговой версии рифта в частности и виртуальной реальности в целом так и не была поднята ни на Geektimes, ни на Хабре. Следует напомнить, что выход гарнитуры виртуальной реальности от Oculus планируется на первый квартал 2016 года. Статью я дополняю некоторыми своими рассуждениями и новыми сведениями, которые появились в период с выхода статьи и до момента ее перевода.

Итак, сама статья.

Grasp от дизайнера из Копенгагена — инструмент, который позволяет вашему ментору или инструктору наблюдать за вами из любой точки мира и помогать в каком-либо деле, будь то готовка или рыбалка. Гаджет крепится на плече, в устройство встроены камера, микрофон и лазерная указка.

Компания Viscira работает над проектом Mindscape: пользователь с помощью очков виртуальной реальности Oculus Rift видит мир глазами человека с позитивными симптомами шизофрении. Цель проекта — не диагностика или лечение болезни, а помощь в её понимании, которая нужна членам семьи пациента, персоналу клиник, студентам медицинских факультетов.

Как мы и обещали, после истории автоэлектроники настало время выяснить какую электронику стоит ждать в автомобилях уже в ближайшем будущем. Давайте постараемся представить, какие еще гаджеты и технологии, возможно, станут такими же привычными как автомагнитолы или видеорегистраторы.

Хотелось получать стереоизображение в очки виртуальной реальности из одной камеры(ведь они делались под смартфон или планшет), чтобы дописать в нее дополненную реальность.

Финский стартап Canatu разработал гибкую электропроводящую плёнку-тачскрин, которая может привести к появлению принципиально новых мобильных гаджетов произвольной формы.

Представьте, что ваш смартфон сгибается и складывается, словно лист бумаги. Если сделать экран из такой плёнки, то у дизайнеров откроется огромное поле для реализации самых сумасшедших идей.

Можно прикреплять тачскрин на различные элементы искривлённой формы. Скажем, на приборную панель автомобиля или на руль велосипеда, или на провод от наушников. Так реализуются новые интерфейсы управления. Команды подаются прикосновением к проводу или к рулю.

Более того, такой материал, например, вшивается в одежду или наматывается прямо на запястье. То есть тачскрин буквально надевается на тело.

На днях индийцы представили стереоскопическое изображение Марса, составленное из новых изображений, полученных марсианским орбитальным зондом Mangalyaan. Стоит напомнить, что Mangalyaan — проект индийских ученых, который поставил сразу несколько рекордов. Так, это самый недорогой проект марсианского аппарата, самый успешный проект за всю историю освоения марса (индийцам удалось совершить успешный запуск и выйти на орбиту Марса с первого же раза) и прочие.

Цель Mangalyaan — изучение состава марсианской атмосферы, определение концентрации метана в атмосфере, и картографирование поверхности. Сейчас Mangalyaan продолжает присылать все новые и новые изображения поверхности Красной планеты, на основе которых Индийское космическое агентство составило стереоскопический снимок Марса.

На проходившем на прошлой неделе TechFest была представлена система, демонстрирующая, как Kinect Fusion может быть полезен в операционных. Данное изобретение поможет нейрохирургам буквально «заглянуть в голову» пациенту до того, как начать операцию.
Планшет с закрепленной на нём сенсором Kinect, а так же оцифрованные результаты сканирования мозга позволяют создать изображение головы пациента, «дополненное» 3Д моделью мозга, кровеносными сосудами или другими медицинскими данными. Полученное изображение можно рассмотреть со всех сторон, позволяя определить оптимальное место для начала операции.
Данный концепт очередной раз демонстрирует, что Kinect давно вышел за рамки индустрии развлечений и в скором времени сможет найти применение в самых различных областях нашей жизни.

Наткнулся на приложение для перевода фраз в реальном времени с помощью камеры смартфона.
Для меня как для человека, использующего только русский и английский языки, оно полностью бесполезно, но понравилась сама идея и реализация. Если приложение действительно стоит своих денег, то в плюсы можно записать и сравнительно низкую цену — 5$.

С помощью приложения можно быстро переводить надписи на дорожных знаках, вывесках, etc. Думаю, создателям видео стоило бы продемонстрировать чтение газеты таким же образом, было бы круче.

Добрый день, уважаемые читатели.

Сегодня я продолжу рассказ о том, как создавать приложения при помощи Swarp SDK. Этот пост является продолжением обзора Swarp SDK. В первой части мы рассмотрели пример из стандартной поставки Swarp и общие принципы работы с ним. А сейчас мы напишем свое AR-приложение, которое будет изменять анимацию 3D-модели в зависимости от наличия маркеров перед камерой. Кому интересно — прошу под кат.

Приложения дополненной реальности становятся все более популярными. Рано или поздно, но кто-нибудь в России обязательно выпустил бы SDK для создания таких приложений. И вот, это произошло — российская компания Sectar выпустила свой продукт Swarp SDK для создания таких приложений на платформе .NET. Далее я опишу Swarp и покажу, как быстро и просто создать свое AR-приложение.

Вчера Брюс Стерлинг обнаружил (и перепечатал в своём блоге) новость о том, что REDMADROBOT создал программную часть для промо-стенда бренда Sobranie, причём дополненная реальность использовалась для рисования в стиле Light Art и для навигации внутри программы стенда:



Постскриптум Стерлинга был таков:

— Okay, objectively speaking, what’s weirder: pretty girls drawing augmented roses in mid-air, or former Soviets hanging out in some big glossy capitalist mall?

(Я специально цитирую его на английском, также как сам он цитировал апрельскую новость про REDMADROBOT на русском языке.)

Ну не странно ли видеть, как медленно исчезают стереотипы в голове у этого автора киберпанковской прозы? Скоро двадцать лет, как состоялся антисоветский переворот, а Стерлинг продолжает называть «бывшими советскими» даже современных «pretty girls», многие из которых либо не помнят Советский Союз, либо даже родились после него.

А для всех нас эта блогозапись Стерлинга даёт возможность проследить ещё одну веху творческого пути той самой команды REDMADROBOT, которая в прошлом году подвешивала пирамиду над Кремлём в дополненной реальности.

Технологии виртуальной (VR) и дополненной (AR) реальности когда-то были плодом фантазии писателей-фантастов, но стали абсолютно реальными. За последние годы было проделано немало работы для их совершенствования, в результате чего VR и AR нашли свое применение в самых разных сферах жизни человека, от развлечений и обучения до искусства и лабораторных исследований. Хоть виртуальная реальности и нереальна, инженеры всячески пытаются сделать ее максимально приближенной к реальности. Для этого необходимо удовлетворить требования нашего мозга, а именно сенсорику. Если с визуальной и звуковой составляющей проблем нет, то внедрение других типов стимулов в виртуальную реальности сопряжено со сложностями. Особенно вкуса. Ученые из Университета штата Огайо (Коламбус, США) разработали новую систему виртуальной реальности, оснащенную модулем вкуса. Из чего состоит данная система, как она работает, и какого ее будущее в рамках технологий VR и AR? Ответы на эти вопросы мы узнаем из доклада ученых.