Pull to refresh

Проведем эксперимент: Кто справится лучше с созданием видео под конец этого года — человек или нейронные сети?

Level of difficultyEasy
Reading time6 min
Views2.8K

«Через 10 лет нам всем шибздец». Такой комментарий я встретил под своим предыдущим постом, когда пытался провести эксперимент: написать песню на русском и сделать видео при помощи нейронных сетей. И я задумался: а что, если сравнить процесс генерации видео нейронными сетями и создания моушн-дизайна человеком под конец этого года? Сколько времени это занимает, из каких этапов состоит процесс и какова стоимость? Может быть, не все так однозначно, или, наоборот, не нужно ждать целых 10 лет. Вы сможете увидеть результат созданной анимации человеком и искусственным интеллектом из одной и той же картинки, чтобы сделать выводы самостоятельно.

Какой такой шибздец?
Total votes 9: ↑7 and ↓2+5
Comments8

«Мегафон» снял анимационный сериал «Ева. Связь сквозь время»

Reading time2 min
Views4.2K

Компания «Мегафон» сняла научно‑фантастический анимационный сериал «Ева. Связь сквозь время». Премьера первого сезона состоялась 27 апреля на «Кинопоиске». По словам создателей, сериал делался с использованием игрового движка Unreal Engine 5. Созданием персонажей и анимации занималась творческая команда It's Alive Studio, авторами сценария и режиссёрами сериала выступили Антон Уткин и Ната Покровская из Lateral Summer Studio. Все мужские роли в сериале сыграны актёром Евгением Марковым, роль Евы исполнила Елена Ходунова. Захват движений происходил посредством костюма Motion Capture. Роли озвучили Алёна Кахута и Роман Евдокимов. Первый сезон сериала выложен на портале «Кинопоиск» и на Youtube‑канале компании «Мегафон». Всего в сериале 3 серии длительностью от 3 до 6 минут.

Читать далее
Total votes 9: ↑9 and ↓0+9
Comments9

CGI в домашних условиях при помощи Unreal Engine и iPhone

Reading time5 min
Views24K
Всем привет! Меня зовут Василий Мазалов, я работаю старшим видеомонтажером в компании Pixonic. Наш отдел занимается созданием видео-креативов для маркетинга и комьюнити: роликов для страниц в сторы, обзорных видео игровых нововведений и прочего контента.

Когда я не создаю креативы, я мониторю просторы интернета на предмет новых форматов и способов подачи материала, чтобы сделать наш собственный контент более разнообразным, интересным и привлекательным для новых игроков.

Год назад я наткнулся на следующее видео:

Смотреть видео


Что мы здесь видим? Парень нацепил на себя костюм захвата движения тела (пока ничего необычного), повесил перед собой iPhone (а вот это уже интересно) и таким образом транслирует анимацию лица и тела персонажа напрямую в режиме реального времени в Unreal Engine, и выглядит результат для столь незамысловатой реализации довольно качественно.

Классная идея, подумал я. Затем закрыл видео. И продолжил дальше работать.

Спустя полгода в открытом доступе оказался обучающий материал о том, как произвести захват анимации лица в Unreal Engine при помощи приложения на iPhone. В то же время я узнал, что в наш арт-отдел приобрели костюм для захвата движения. Посмотрел его совместимость с UE: всё подошло. Оставалось только найти iPhone для дальнейшей работы, но в наше время с этим проблем еще меньше.

Смотреть видео


Вопросов была масса. Передо мной было непаханное поле из неизученной анимации, Unreal Engine, моделирования человеческого лица и тела и других совершенно далеких от видеомонтажа вещей, но в то же время огромное желание воплотить в жизнь задуманное.

Начался долгий процесс изучения различной документации.

Что в результате получилось и как мы этого добились, читайте дальше.
Читать дальше →
Total votes 31: ↑30 and ↓1+29
Comments10

Mocap – оборудование Xsens для производства VFX. Личный опыт использования

Reading time3 min
Views3.9K

Технология motion capture, или mocap, существует с 1970х годов. Ее используют крупные компании в производстве фильмов и компьютерных игр, добиваясь максимально реалистичной анимации. Недавно мы приобрели в нашу студию продвинутый вариант такого оборудования бренда Xsens. О нашем опыте работы расскажем в этой статье.

Читать далее
Rating0
Comments5

Unreal выпустила приложение для iPhone, которое захватывает мимику лица для Unreal Engine

Reading time2 min
Views8.9K

Студия Unreal выпустила приложение для iOS, которое считывает лицевую мимику пользователя и анимирует её на персонаже для Unreal Engine в режиме реального времени. Оно получило название Live Link Face; по словам разработчиков, приложение предназначено как для профессиональных съёмок методом motion capture, так и для любительских, например, для стриминга, сообщается на сайте Unreal. 

Читать дальше →
Total votes 7: ↑6 and ↓1+5
Comments6

ИИ обучили выполнять 3D-захват движения с помощью любой камеры

Reading time2 min
Views5.2K
image

Исследователи из Института Макса Планка и Facebook Reality Labs утверждают, что они разработали алгоритм машинного обучения — PhysCap — для 3D-захвата движения. Алгоритм работает с любой зеркальной камерой, скорость съемки которой составляет 25 кадров в секунду.
Total votes 13: ↑13 and ↓0+13
Comments3

Программа конференции Application Developer Days 2010

Reading time3 min
Views481
Application Developer DaysНаконец, произошло то, чего от нас требовали больше месяца — опубликована предварительная программа конференции Application Developer Days 2010! Да, мы были виноваты, но нас частично оправдывает то, что все это время мы приглашали очень интересных и очень занятых людей. Они согласились, мы с радостью докладываем об этом.

Итак, вот некоторые из тех, кто будет выступать на конференции.
Читать дальше →
Total votes 24: ↑20 and ↓4+16
Comments27

Визуализация эмоций в 3D-играх

Reading time3 min
Views3.4K
image
Компания Rockstar Games, получила всемирную известность благодаря своей серии видео-игр Grand Theft Auto, в которой каждый мог на время очутиться хоть и на виртуальных, но таких близких к реальности, полных насилия улицах. В новом грядущем проекте Rockstar, LA Noire, важную роль будут играть человеческие лица. Австралийские разработчики игры, Team Bondi, использовали передовые технологии захвата изображения лиц и мимики, которые позволили перенести в виртуальное пространство широчайший диапазон тонких эмоций, сыгранных реальными актерами. В большинстве игр до этого момента, такие крупные высокодетализированные планы персонажей использовались лишь в межуровневых видеороликах, специально срежиссированных и демонстрировались для большего погружения в сюжет игры, связывая интерактивные ее части.
Читать дальше →
Total votes 38: ↑36 and ↓2+34
Comments26

Создаем систему видеонаблюдения с помощью motion

Reading time3 min
Views112K
В этой статье я хочу рассказать о настройке и использовании домашней системы слежения. Вы сможете сделать за любой территорией, попадающей в поле зрения вышей веб-камеры, отправлять себе сообщение при обнаружении активности в этой области, делать снимки, транслировать изображение по сети (можно прикрутить авторизацию для доступа видео с вашей веб-камеры и смотреть удаленно, если у вас есть статический ip) вообще что захотите — полный контроль и свобода выбора, что в общем характерно для ос gnu/linux и подобных (в дальнейшем речь пойдет именно о linux).
Читать дальше →
Total votes 58: ↑54 and ↓4+50
Comments24

Моя версия костюма отслеживания движений

Reading time9 min
Views12K

Предыстория


Много времени утекло с того момента, как я стал начинающим «ардуинщиком». После заказа «стартового набора» из поднебесной и поморгал светодиодами, и покрутил сервоприводами, и даже собрал простенькую платформу Гью-Стюарта из кусков упаковочного полиэтилена, скрепок, кнопок и копеечных сервоприводов SG90.

image

Прошу прощения за качество фото — другого не сохранилось, как и самой платформы — дети сломали.

С этой платформы и началась, может быть даже кому-то интересная история. Управлять платформой с помощью клавиатуры или джойстиком интересно, но управлять ею датчиком положения в пространстве — интереснее вдвойне. Пробуя корректно заставить работать очень известный датчик от TDK — InvenSense MPU-9250, вспомнилась статья уважаемого ObelardO — «Как я делал костюм захвата движений» и затаилась идея в голове повторить этот опыт.

Что из этого получилось, можно увидеть и прочесть под катом.
Total votes 32: ↑32 and ↓0+32
Comments52

60 минут в завтра: «Мировой опыт создания голограмм – стоит ли оживлять мертвых знаменитостей?»

Reading time4 min
Views14K
Привет, Гиктаймс!

Мы с вами живем в удивительное время. Новые Горизонты бороздят просторы солнечной системы, по Земле катаются автомобили-роботы, а музыкальным лейблам уже даже не нужны живые артисты для того, чтобы зарабатывать деньги и выдавать слушателям продукт – музыкальный или визуальный. И если с первым все понятно: старые записи, черновики легендарных музыкантов и просто неизданные в нужное время материалы могут работать на имя исполнителей еще очень долгое время, то с визуальной составляющей мы попытаемся разобраться. Кому, зачем и в каком виде понадобилось подменять себя на сцене голографической проекцией, и есть ли у этого вида искусства перспективы в музыкальном?

image
Читать дальше →
Total votes 16: ↑14 and ↓2+12
Comments24

Unity3D + Kinect, или анимации на коленке

Reading time5 min
Views28K
Вступление

Здравствуй, уважаемый читатель. Прежде чем начать, мне хотелось бы немного рассказать о цели и формате моей статьи. Обычно с такими заголовками статьи носят обозревательный характер, в них описываются технические стороны реализации того или иного решения или приводится инструкция по эксплуатации и т.д. Выводы же читатель делает самостоятельно. Прежде чем написать эту статью, я провел небольшую исследовательскую работу на предмет аналогов. И нашел несколько статей как на самом хабре, так и массу видео материалов на ютубе. Поэтому я решил не писать очередной обзор технологии, а поделиться впечатлениями, рассказать о граблях, на которые мы наступили, и привести немного “кухонной” аналитики.
Цель этой статьи – помочь вам определиться, использовать или нет данный метод. В первую очередь она рассчитана на технических специалистов, хотя и не пестрит техническими деталями. Но так же будет полезна и всем остальным – арт-специалистам, менеджерам проектов да и просто всем, кто, так или иначе, связан с разработкой игр. Возможно, ссылка на данную статью поможет выбить бюджет у начальства и ускорить разработку/повысить качество вашей будущей игры. Итак, приступим.
Читать дальше →
Total votes 16: ↑12 and ↓4+8
Comments2

Автоматическое выделение меток

Reading time5 min
Views23K
В машинном зрении и робототехнике есть забавный класс задачек: обнаружение заранее известных меток. Сюда можно отнести всё: QR-коды, Augmented Reality ( AR, дополненная реальность), задачи позиционирования объектов (motion capture, определение местоположения), детектирование объектов по меткам, классификация объектов в робототехнике (например при автоматической сортировке), помощь автоматическим системам в позиционировании (роботизированные захваты), трекинг объектов, и.т.д.



В статье описаны основные методы захвата меток, их возможности, границы применимости.
Читать дальше →
Total votes 52: ↑51 and ↓1+50
Comments8

Последняя часть пазла полной виртуальной реальности

Reading time1 min
Views19K
image

Вчера на кикстартере началась кампания по сбору средств для Control VR — последней не достающей части для костюма виртуальной реальности, а именно высокоточного отслеживания движения рук, кистей и пальцев.

Ссылка на Kickstarter
Читать дальше →
Total votes 7: ↑5 and ↓2+3
Comments14

Perception Neuron: Motion Capture в каждый дом

Reading time2 min
Views23K
Двое суток осталось до окончания кампании на Kickstarter по сбору средств на «Project PERCEPTION NEURON: Motion Capture, VR and VFX». Недавно на Хабре о ней уже проскакивала миниатюрная заметка. Считаю, что это устройство заслуживает большего внимания, тем более, что с момента старта кампании выяснилось довольно много интересных подробностей и добавились новые фичи.


Читать дальше →
Total votes 17: ↑16 and ↓1+15
Comments4

Motion Capture: про движение

Reading time5 min
Views22K
Технология Motion Capture уже давно вошла в категорию must have для разработчиков как ААА-тайтлов, так и мобильных проектов. Она позволяет сделать движения персонажей по-настоящему реалистичными и поставить практически любые сцены. В этой статье поговорим об истории становления Motion Capture, преимуществах и недостатках технологии, и ее использовании в продвижении игр.


Читать дальше →
Total votes 12: ↑12 and ↓0+12
Comments9

Беспроводной VR и захват движения на оборудовании HTC Vive

Reading time7 min
Views19K

Предисловие


Раньше я уже писал о своем проекте impulse — костюме захвата движений на базе инерциальных сенсоров. Прежде всего, хочу поблагодарить всех, кто оставил свой отзыв, так или иначе, помог проекту. Должен сказать, что особого развития проект не получил, проблема дрейфов не была решена 9-осевыми датчиками, но компенсации с помощью цифрового компаса значительно помогли, также использование простого оптического трекинга (например 2 светодиодных маркера на голове) позволяет получить среднее значения дрейфа. Но сегодня не об этом. Я хочу рассказать об относительно недорогом способе захвата движения для систем виртуальной реальности на базе HTC Vive без колхоза и паяльника, а также о том, как избавиться от провода, который неизбежно соединяет голову и компьютер, что создает множество неудобств. Еще расскажу, как удалось добиться области трекинга в ~80 метров кв.
Total votes 13: ↑13 and ↓0+13
Comments38

Shoot3D — мокап. Тайна пляшущих человечков

Reading time1 min
Views1.5K
Случайно наткнулся на революционную технологию захвата движения (Motion Capture) которая IMHO является прорывом в будущее. Это технология безмаркерного захвата движения позволяет имея две обычных вебкамеры вводить в компьютер движения человека.
Читать дальше →
Total votes 13: ↑13 and ↓0+13
Comments14

Заходят как-то в бар Мандалорец, Генлок и СКМ…

Reading time9 min
Views2.9K
Это был обычный летний будний день между первой и второй волнами коронавируса, а это значит, что мы (СКМ Трекинг) могли позволить себе такую роскошь как работа в офисе с полигоном для тестирования нашей гибридной радио-инерциальной системы захвата движений под боком. Тут нам поступил звонок:
«узнали про вашу систему трекинга и хотим посмотреть ее в действии, прямо сейчас, так как вечером мы возвращаемся в Питер!»
Хоть мы и были в офисе, но профилактические меры не позволяли пропускать кого-либо в здание кроме сотрудников, поэтому мы продолжили телефонный разговор и выработали план действий с учетом «карантинных» мер.
Заказчиками на том конце провода оказались ребята из «Black Anchor Productions» Ltd. и Parallax Digital. Они еще раз описали задачу, которую предполагалось решить с помощью нашей системы трекинга (захвата движений), указали желаемые характеристики системы, и мы согласовали первую серию онлайн тестов.
Читать дальше →
Total votes 7: ↑6 and ↓1+5
Comments0

Слежение за объектом по его цвету с использованием Aforge.NET

Reading time4 min
Views21K
Здравствуйте. Частая фраза: «мой первый пост» :). В нем хочу вам рассказать о своем небольшом проекте по отслеживанию объекта по его цвету. Сейчас это имеет довольно широкую область применения, например те же джойстики от Wii и Playstation 3. Основой для работы послужила разработка Андрея Кириллова Aforge.NET – довольно мощная штука для самопальной обработки изображений.
Код не претендует на «истину в последней инстанции», многое было упрощено (в одном месте, в некотором смысле даже допущено дублирование – для быстрого доступа к пикселам я создал свой класс, хотя аналогичные наработки были и в Aforge). Но тем не менее, код работает, отслеживает объект, выдает информацию о местоположении, позволяет динамически вычислять оттенок объекта (на случай изменения освещения).

Для заинтересовавшихся — прошу под кат.
Читать дальше →
Total votes 58: ↑48 and ↓10+38
Comments12
1