Всем привет. Меня зовут Дядиченко Григорий, и я люблю трекинг. За последние годы технологии трекинга развивались семимильными шагами и становились всё более и более демократичными. Появилось много технологий самого разного плана. Мне повезло поработать с огромным количеством технологий разного рода, поэтому данные знания хочется несколько структурировать. По большей части мы будем разбирать технологии трекинга совместимые с Unity или Web. Так что, если эта тема вам интересна. Добро пожаловать под кат!
Разработка под AR и VR *
Видишь суслика? А он разработан...
А ну-ка, сгруппировались, или как отделить фото котиков от счетов ЖКХ
Гораздо проще решать все эти задачи с помощью одного приложения. Поэтому мы и обновили ABBYY FineScanner AI. Теперь он умеет автоматически сортировать фотографии из галереи смартфона на 7 групп документов и быстро ищет нужные фото по текстовым запросам.
Сегодня мы подробно расскажем, как создавали каждую из этих фич, какие технологии при этом использовали и как в этом помог фреймворк ABBYY NeoML. Также покажем, как это работает в приложении. А в конце – поделимся нашими планами по развитию FineScanner и зададим вам несколько вопросов.
Мой топ полезных инструментов для Unity разработчика
Всем привет! Меня зовут Григорий Дядиченко, и я всё ещё разрабатываю проекты на Unity под ключ. Сегодня хочется поговорить про полезный инструментарий для Unity разработчика. У меня давно на эту тему есть свой топ ассетов или софта, которые используются почти в каждом проекте, плюс несколько своих утилит. Не будем касаться слишком широких и банальных инструментов типа adb, а составим некоторый набор того, что можно использовать почти в каждом проекте.
Чипирование в ЭКО, VR в медицине и нейросети в УЗИ
Технологии приобретают смысл, когда несут пользу людям. Особенно это касается медицины. В новом интервью поговорим про технологии в медицине и репродукции, причем тут Яндекс и как с помощью BigData "нагнуть" фармкомпании.
Мы посмотрели на 3D операционную,узнали, как она работает, увидели рекомендательную систему для врачей "Асю" и, как проходит ЭКО.
Мы встретились с основателем сети клиник женского здоровья «Клиника Фомина» и генетической лаборатории Medical Genomics. Он адепт искусственного интеллекта и технологий, активно внедряет их в своей клинике, чем нас и привлек. Сейчас активно занимается созданием рекомендательной системы для врачей на базе ИИ и BigData, которая не только несет пользу для пациентов, но и имеет научную ценность.
Истории
Заходят как-то в бар Мандалорец, Генлок и СКМ…
«узнали про вашу систему трекинга и хотим посмотреть ее в действии, прямо сейчас, так как вечером мы возвращаемся в Питер!»Хоть мы и были в офисе, но профилактические меры не позволяли пропускать кого-либо в здание кроме сотрудников, поэтому мы продолжили телефонный разговор и выработали план действий с учетом «карантинных» мер.
Заказчиками на том конце провода оказались ребята из «Black Anchor Productions» Ltd. и Parallax Digital. Они еще раз описали задачу, которую предполагалось решить с помощью нашей системы трекинга (захвата движений), указали желаемые характеристики системы, и мы согласовали первую серию онлайн тестов.
Microsoft представила контроллер для осязания объектов в виртуальной реальности
Тактильный контроллер PIVOT позволяет почувствовать вес и сопротивление предметов в VR.
Исследовательское подразделение Microsoft Research представило контроллер, который имитирует прикосновение к объектам в виртуальной реальности. PIVOT крепится к запястью и представляет собой шарнир с небольшим мотором и тактильной ручкой. Когда VR-трекер фиксирует, что рука человека должна соприкоснуться с виртуальным объектом, рукоять перемещается в ладонь с нужной силой, имитирующей вес предмета и скорость его падения.
Как мы сделали свою AR-платформу для дистанционного обслуживания и ремонта оборудования
Меня зовут Антон Федосеев, я – разработчик AR-платформы для видеоконференцсвязи, которой пользуются наши производства. Мы запустили сервис, с помощью которого наши сотрудники могут общаться по видео с коллегами из других регионов, получать онлайн-консультации от экспертов – производителей оборудования (тоже из других регионов), а компания – экономить от 500 тысяч рублей до нескольких миллионов за 1 видеозвонок.
Откуда взялась эта экономия, в чём особенность использования такого сервиса на промышленных объектах, почему мы не обошлись существующими на рынке аналогами и как делали свой продукт – расскажу под катом.
3D Говорящие Головы. Третий проект центра разработки Intel в России
Согласно известной шутке все мемуары в книжных магазинах должны располагаться в разделе «Фантастика». Но в моём случае это и правда так! Давным-давно
3D Talking Heads (Трехмерные Говорящие Головы) – это показывающий язык и подмигивающий бронзовый бюст Макса Планка; обезьянка, в реальном времени копирующая вашу мимику; это 3D модель вполне узнаваемой головы вице-президента Intel, созданная полностью автоматически по видео с его участием, и еще много всего… Но обо всём по порядку.
Нейронное суперсэмплирование при рендеринге в реальном времени
Рендеринг в реальном времени для виртуальной реальности создаёт уникальный спектр задач, и основными из них являются необходимость поддержки фотореалистичных эффектов, достижение высоких разрешений и увеличение частоты обновления. Для решения этих задач исследователи Facebook Reality Labs разработали DeepFocus — систему рендеринга, представленную нами в декабре 2018 года; она использует ИИ для создания сверхреалистичной графики в устройствах с переменным фокусным расстоянием. В этом году на виртуальной Конференции SIGGRAPH мы представили дальнейшее развитие этой работы, открывающее новый этап на нашем пути к созданию будущих дисплеев высокой чёткости для VR.
Как научиться XR-разработке и получить оффер за пять месяцев
Развитие ARKit в этом году и новая возможность в ARKit 4: Location Anchors
В последние годы я очень активно работаю с сфере разработки нативных игр под платформу Apple и интересуюсь возможной интеграцией игровых процессов в AR. Поэтому стараюсь следить за всеми обновлениями которые ежегодно анонсируются на WWDC. Хотя за последние годы не было никаких обновлений для SpriteKit, SceneKit и GameplayKit, но Apple продолжает активно обновлять и продвигать ARKit и RealityKit которые можно интегрировать с этими игровыми инструментами.
Ближайшие события
Подкаст «ITMO Research_»: как подойти к синхронизации AR-контента с шоу в масштабе целого стадиона
С 2012 года Андрей работает в научной группе Визуализация и компьютерная графика. Занимается крупными прикладными проектами на государственном и международном уровне. В этой части беседы мы говорим о его опыте AR-сопровождения массовых мероприятий.
Подкаст: AR на стадионе, моделирование процессов реального мира и мультидисциплинарный геймдев
С 2012 года Андрей работает в научной группе Визуализация и компьютерная графика. Занимается крупными прикладными проектами на государственном и международном уровне. Мы говорим о его опыте участия в AR-сопровождении массовых мероприятий, визуализации данных, моделировании процессов реального мира и мультидисциплинарном геймдеве.
Ждёт ли VR судьба Microsoft Kinect или же это будущее игр — давайте рассуждать вместе
В октябре прошлого года на съёмках фильма «Как устроена IT-столица мира» Юрий Дудь задал мне прямой вопрос про будущее VR. И я ответил ему:
«В тренде искусственный интеллект. Виртуальная реальность была очень популярна 3 года назад, сейчас уже сдала позиции, сейчас это не совсем модно».
Прошло 8 месяцев, и мы видим: возможно, появилась маленькая надежда, что VR возвращается с новыми силами и амбициями. Благодаря Half-Life: Alyx и (отчасти!) всемирной самоизоляции, количество пользователей шлемов виртуальной реальности за апрель выросло на 1 миллион. Люди пересмотрели свои взгляды и поверили в новое направление. Это касается в том числе и нашей студии, которая тоже немного в предвкушении перспективами возможного взлёта VR.
Бесплатные вебинары Skillbox: пишем игры на PHP, Unity и Unreal Engine
Делимся с вами подборкой вебинаров на тему разработки игр. Вы узнаете, как сделать простую консольную игру на PHP, 3D-арканоид на движке Unreal Engine 4, космическую аркаду и AR-приложение на Unity. Заходите под кат – будет интересно.
Почему VR разработка вам не подходит
3D игры в Инстаграм на Javascript, или траектория полета колбасы
После первой статьи о программировании игр в масках Инстаграм ко мне обратился заказчик с просьбой создать игру в Инстаграм для его пиццерии. Эту игру планировалось использовать для целей продвижения бизнеса. Я, конечно, понимаю, что, судя по количеству просмотров первой статьи, тема Инстаграма сообществу Хабра не особо интересна. По-видимому, этот сервис все еще считается каким-то несерьезным развлечением для блондинок, а статья о нем годится только в качестве пятничного чтива под вечерний коктейль. Впрочем, сегодня, как раз, пятница. Доставайте коктейль. И не забудьте пригласить блондинок. Однако, вполне вероятно, в будущем технологии достигнут таких высот, что мы начнем играть в Инстаграме в GTA-5. Или 10.
В данной статье речь пойдет сразу о двух играх. Одну я сделал на заказ, а вторую потом — для себя. С каждой новой игрой я сталкивался с новыми задачами, поиск путей решения которых заставлял меня знакомиться с новыми нюансами разработки. Возможно, этот рассказ будет полезен и другим разработчикам элементов дополненной реальности. Игры написаны на чистом Javascript без использования каких-либо дополнительных библиотек. Для отображения 3D графики задействованы встроенные средства Инстаграм.
Какие на ощупь виртуальные стены?
За последние несколько лет устройства, позволяющие пользователю окунуться в виртуальную реальность (VR), стали намного сложнее и лучше. VR применятся и в образовании, и в искусстве, и в развлечениях, и даже в медицине (нет, я не про Surgeon Simulator). Благодаря VR человек может увидеть то, что никогда бы не увидел в реальной реальности, такой вот каламбур. Однако для полного погружения в мир грез нехватает одного из важнейших ощущений, которое обеспечивает контакт человека с окружающим миром — прикосновения. Мы постоянно что-то ощущаем на ощупь: клавиши клавиатуры, дверная ручка, чашка чая и т.д. В VR все объекты, какими бы реалистичными они ни казались глазам, лишены какой-либо физической репрезентации в реальности. Группа ученых из университета Карнеги-Меллона (США) решили это исправить, использовав достаточно простой по концепции прибор. Из чего состоит и как работает изобретение мы узнаем из доклада ученых. Поехали.
Вклад авторов
sahsAGU 172.2itsar 170.0DyadichenkoGA 130.0xsevenbeta 111.0dimonline 105.0viacheslavnu 82.6I_DOT_I 80.0maxgammer 79.0FibrumVR 79.0pkruglov 74.6