Разработка под AR и VR *

После релиза Apple Vision Pro интерфейсы перестают быть концептами из фантастических фильмов и формируют новую реальность. Какой она будет? Информации пока немного, а купить очки от Apple могут пока лишь единицы.

В статье доступным языком и с множеством примеров объясняем:

— На чём строится визуальное восприятие

— Что показывает Apple на своих презентациях по AR

— Какие AR-концепты уже есть для соцсетей, игр, кино и бытовых задач

Материал написан дизайнерами и прежде всего для дизайнеров, но если вы неравнодушны к новым технологиям, вам точно будет интересно.

Всем привет!

Меня зовут Никита, я — Tech Lead команды QuiXR. Сегодня я поделюсь с вами обзором Apple Vision Pro и Meta* Quest 3. Попробуем разобраться, соответствуют ли гарнитуры заявленным ценам? Кому и для чего подойдут?

Мы сравним следующие особенности гарнитур:

1. Внешний вид

2. Удобство использования

3. Время автономной работы

4. Отслеживание рук и глаз как способ управления

5. Качество изображения

6. Экосистему и контент

7. Функцию рабочего стола

8. Аватары пользователя

Также мы обсудим нашумевший в социальных сетях Travel Mode (режим работы в движении) и его особенности.

Спойлер: Meta* Quest 3 на момент выхода Vision Pro мы считали оптимальным в соотношении “цена — качество” из всех имеющихся у нас устройств. Quest 3 доступен за 500$, а стоимость Apple Vision Pro начинается от 3500$.

У меня есть дурная привычка: я играю в игры. Впрочем, понятие "играю в игры" довольно своеобразное.

Уже несколько лет как я обзавелся VR платформой от KAT VR. Согласно её внутренней статистики, я прошел на ней около 30 километров и сделал 40к шагов. Статистика, конечно, врёт и сильно, было гораздо, гораздо больше. Однако же да, на ней я играл гораздо меньше времени чем с ней.

У Google есть много проваленных проектов вроде соцсети Google+. Даже говорят, что у компании есть этакое «кладбище», которое регулярно пополняется. В 2023 году в полку, как говорится, прибыло — Google официально закрыл свой проект по очкам дополненной реальности Google Glass (точнее, ее корпоративную версию Enterprise Edition) почти через 10 лет после старта продаж.

Сейчас для техногиков есть и другие варианты: например, Ray-Ban Meta (признана в России экстремистской организацией и запрещена) и Amazon Echo Frames, а также на подходе множество новых моделей от хорошо известных Xiaomi, HTC, Huawei. И конечно же вышедшие недавно очки Apple Vision Pro.

Но давайте посмотрим, в чем вообще проблема умных очков: почему даже Google потерпел фиаско. Да и что-то не видно толпы людей в подобных гаджетах, хотя технология уже неплохо развита.

Всем привет! На связи Саша Сырков из 2ГИС, и это рассказ, как чуть больше недели мы разрабатывали приложение на Vision OS, разбирались в особенностях Reality Composer Pro, ловили всевозможные текстурные баги, а в итоге всё же получили заветный апрув от Apple за 17 часов до официального открытия продаж VR-гарнитуры.

Под катом хронология событий от идеи до рабочего продукта и технические подробности создания нашего первого VisionOS-приложения — краткого справочника с 3D-моделями достопримечательностей.

P.S. для самых пытливых в конце вопрос: кто первый отгадает ответ, тому подарим нашего гуся.

Всем привет! Меня зовут Егор Молчанов, я разработчик в команде CRM для менеджеров ипотечного кредитования в компании Домклик. Хочу поделиться своим опытом создания VR‑тура с помощью фреймворка A‑Frame и библиотеки React. Для этого написал свой небольшой pet‑проект, который мы сейчас разберём.

Apple вложила массу усилий в разработку правил, советов и руководств по проектированию элементов интерфейса, чтобы не столкнуться с подводными камнями, связанными с созданием 3D-интерфейсов. Это помогло избежать обилия подвижных элементов и визуального беспорядка, которые могут запутать пользователя или даже повлиять на его самочувствие.

Однако это привело к тому, что многие приложения, которые я видел, были без своего характера. Скриншоты кажутся безвкусными, а отличить одно приложение от другого становится затруднительно.

Иконки — визитные карточки для любого приложения в App Store. Наличие кроссплатформенного приложения подразумевает понимание контекста, в котором будет отображаться иконка.

Когда дело доходит до новых технологий, таких как visionOS, убедитесь, что у вас есть всё необходимое для эффективной адаптации значка приложения. Цель состоит в том, чтобы создать многослойную иконку, которую можно использовать в системе для придания эффекта глубины, когда пользователь выбирает приложение взглядом.

Информационная служба Хабра посетила всероссийский форум «Автоматизация и цифровизация процессов ТОиР в современных условиях». Этот форум — максимально отраслевое мероприятие. Проходило оно в «Сколково» в Москве. Было две площадки с выступлениями и около 10 стендов. Шёл я на мероприятие со смешанными чувствами, с одной стороны, для тематики портала не так много докладов, хотя на научпоп‑конференцию я ходил (скоро и по ней будет отчёт). С другой стороны, в один из дней был целый блок, посвящённый AR/VR‑разработкам и обучению, экзоскелетам, БПЛА, используемым в техническом обслуживании и ремонте (ТОиР). Кроме того, уже на самой конференции я выяснил, что будут доклады о датчиках и использовании IIoT‑технологий в индустриальной промышленности.

В феврале 2020 года началась пандемия, мы перешли на удалённый формат работы и очень быстро освоили новый поведенческий паттерн взаимодействия друг с другом в формате онлайн с помощью сервисов ВКС. Однако со временем недостаток живого общения и ощущения физического присутствия начали приводить к эмоциональному выгоранию, снижению мотивации и общей продуктивности.

Мы с коллегами из команды RnD XR (extended reality) департамента SberDevices начали думать, как можно использовать технологии 3D и XR для повышения качества взаимодействия команд на ежедневных видеовстречах в SberJazz. Так родилась идея решения SberJazz XR.

Четыре года я занимаюсь разработкой различных спецэффектов для фото и видео в мобильных приложениях. Вроде бы это локальная и как бы несерьезная тема, но одну только плачущую маску в Snapchat посмотрели 9 млрд раз. Такие штуки пользуются бешеной популярностью и здорово повышают виральность мобильных приложений, но с каждым годом удивлять людей становится все сложнее.

В этой статье я разберу эволюцию видеоэффектов, поделюсь наблюдениями и раскрою пару инсайдов о том, как перенести стилизацию изображения из StableDiffusion на смартфоны.

Это статья про компьютерные игры и о погружении в них, об «игровом выгорании» — когда кажется, что хороши игОр нет, и что играть уже не во что. 

Мы попробуем разобраться, что влияет на погружение в игры и как можно усилить эффект погружения для виртуальной реальности. Подумаем, стоит ли использовать для этих целей трансовые состояния или гипноз. Обсудим эксперимент с резиновой рукой и расскажем об игре, которая управляется дыханием.

Опишу мой спонтанный эксперимент по борьбе с фобиями с помощью VR, на примере девушки которая боялась высоты. А также расскажу о попытках привлечь психотерапевтов для решения задачи более полного погружения. Спойлер: по этическим соображениям почти никто не согласился.

На неделе закончили интересный проект - цифровой двойник буровой установки УРАЛМАШ БУ 5000/320ЭУК-Я, которая предназначена для бурения глубоких и сверхглубоких скважин на нефть и газ, с условной глубиной бурения 5000 метров...

Сегодня (28 сентября) открыт предзаказ новых очков виртуальной реальности Oculus Quest 3, релиз которых назначен на 10-ое октября. Сделаю небольшой обзор шлема, выскажу своё мнение о нём, сравню с предыдущим шлемом Quest 2 и Pico 4.

Сам я активно пользуюсь Oculus Quest 2 уже пару лет и если сравнивать их с третьей версией, то забегая впёрёд скажу, что новый шлем выглядит просто потрясающе!

В июне этого года на WWDC2023 компания Apple презентовала новое устройство — Apple Vision Pro. Под соусом Джобсовского «One more thing…» — легендарной фразы, с которой Стив презентовал новый продукт, Тим Кук рассказал нам о новой разработке Купертино.

Многие привыкли видеть в новых продуктах Apple революцию и какой-то технологический прорыв. Казалось бы, и здесь тоже самое — заявленный функционал поражает воображение. Вот только у продукта есть проблемы. И их много.

Всем привет! Меня зовут Шико, я работаю в Яндекс Маркете в команде Android-разработки. Сегодня я расскажу историю, которая случилась в 2021 году. Как-то раз я вызвался добавить в мобильное приложение AR (то есть, дополненную реальность). Оно нужно, чтобы товар можно было «примерить» в интерьер.

Сначала я расстроился: показалось, что ничего особо интересного не будет — всего-то подключить ARCore и делов. Но это ровно до тех пор, пока не выяснилось, что большинство файлов моделек было в USDZ-формате, а ArCore на тот момент с ним не работал. То есть, когда на iOS в процессе разработки таких проблем не возникало, нам нужно было придумать способ перевести существующие модельки в другой формат — GLB. Казалось бы, скачай конвертер и нажми на кнопку «Конвертировать». Не тут-то было. 

И в этой статье я расскажу, какие методы конвертации я пробовал, почему они не подошли и с чем не смогли справиться Blender и Unreal Engine. Спойлер: в итоге мне пришлось написать собственный плагин и я покажу его код.

Дисклеймер: я не "яблочный фанат", яблоками пользовался долго, не понравилась ограниченность платформы и пользовательских сценариев, но сильные стороны их философии я полностью признаю.

Кратко: шлем - пушка! Но не для VR геймеров (пока что), да и вообще широкому кругу покупателей первое поколение брать ни к чему - "это на новый год", ждите второе поколение, подешевле. Зато вся индустрия XR и VR дружно побежит вперед, в светлое будущее. Будет интересно.

Подробно: Тема большая и к ней можно подходить с разных сторон. Я люблю VR в первую очередь за игры, и основное сравнение буду делать с Quest 2 ($350) как с самым массовым устройством, но в целом попробую затронуть все основные моменты. Давайте разбираться.