Comments 41
Вот похожий проект — несколько энтузиастов из Польши в 2014 году сотворили гаджет, привносящий виртуальную реальность в реальную жизнь — вид от третьего лица. Они применили Oculus Rift с парой стереокамер GoPro, которые поворачиваются согласно командам джойстика в вашей руке.
Было бы интересно посмотреть видео где идет сравнение движений человека в реале и движений персонажа в виртуальной реальности. Мы видим человека, а что видит человек?)
Ну в нашем случае персонаж и есть человек — компьютерной графики нет. Он просто видит себя со стороны. На видео я иногда снимал ноутбук, на котором шла трансляция того-же видео, что человек получал в Oculus Go. Оно дает представление о том, что видит игрок.
Не знаю, что имел ввиду предыдущий комментатор, но лично мне показалось, что камера закреплена не очень жёстко (болтается), изменяется центр тяжести, плюс таки есть некоторая задержка картинки, то есть:
1. болтающаяся камера при неподвижном теле вводит дисбаланс в картнику, из-за чего снижается скорость движений (человек [под]сознательно ждёт стабилизации)
2. задержка картинки (пусть и доли секунды) снижает точность, из-за чего нет корректирования движений в реальном времени, отсюда эта неуклюжесть (усиливаемая изменившимся центром тяжести) и замедленность движений
Так что да, было бы интересно сравнить что делает человек через камеру со стороны, как на видео, и что он видит через камеру в виде двух рядом расположенных картинок (да, я понимаю, что угол съёмки будет разный) с синхронизацией по времени, а не по действиям. Имею ввиду, не окажется ли, что человек уже сжал кулак, а перед глазами у него ещё раскрытая ладонь?
1. болтающаяся камера при неподвижном теле вводит дисбаланс в картнику, из-за чего снижается скорость движений (человек [под]сознательно ждёт стабилизации)
2. задержка картинки (пусть и доли секунды) снижает точность, из-за чего нет корректирования движений в реальном времени, отсюда эта неуклюжесть (усиливаемая изменившимся центром тяжести) и замедленность движений
Так что да, было бы интересно сравнить что делает человек через камеру со стороны, как на видео, и что он видит через камеру в виде двух рядом расположенных картинок (да, я понимаю, что угол съёмки будет разный) с синхронизацией по времени, а не по действиям. Имею ввиду, не окажется ли, что человек уже сжал кулак, а перед глазами у него ещё раскрытая ладонь?
Да, мне тоже потом народ говорил что надо было синхронно записывать картинку с камер и на видео ее в уголке показывать, чтобы были видны движения человека и то что он видит.
В данном случае картинка шла по WiFi, это добавляло задержку около 0,1 секунды. Можно сделать вариант с передачей по проводу, тогда задержки практически нет (сотые доли секунды).
Ну и камеру мы сознательно закрепили на спине, а не на голове сзади, хотя такой вариант рассматривали. Цель была избежать постоянных резких движений камеры, это добавляет дискомфорта в ощущения.
В данном случае картинка шла по WiFi, это добавляло задержку около 0,1 секунды. Можно сделать вариант с передачей по проводу, тогда задержки практически нет (сотые доли секунды).
Ну и камеру мы сознательно закрепили на спине, а не на голове сзади, хотя такой вариант рассматривали. Цель была избежать постоянных резких движений камеры, это добавляет дискомфорта в ощущения.
UFO just landed and posted this here
Читал про энтузиаста который с похожей приспособой заперся в квартире и пытался прожить не снимая неделю.
Вроде дня через 3 прервал эксперимент по причине что крыша начинает отъезжать.
Вроде дня через 3 прервал эксперимент по причине что крыша начинает отъезжать.
Вы наверное про вот эту статью habr.com/post/376743 юзера hidoba говорите. Сильный тест, согласен!
Как вы считаете, можно ли удешевить проект использовав телефон и обычный кардборд, к примеру вместо очков окулуса?
Второй вопрос, есть ли ощутимая задержка при передаче видео, мешает ли это ощущать тело/пространство?
Так считайте что он уже удешевлен — приложение изначально под Андроид писалось, и именно в кардборде и тестировалось.
UPD> Насчет второго вопроса про задержку — сейчас около 0,1 секунды. Уменьшить можно только исключив вайфай и передавая картинку по проводам. Придется серьезно кодить, но в принципе реально. Нужно будет Raspberry соединить шнурком USB с телефоном и включить поддержку обмена данными.
UPD> Насчет второго вопроса про задержку — сейчас около 0,1 секунды. Уменьшить можно только исключив вайфай и передавая картинку по проводам. Придется серьезно кодить, но в принципе реально. Нужно будет Raspberry соединить шнурком USB с телефоном и включить поддержку обмена данными.
Спасибо! А какие планы у проекта? Я правильно понимаю, что опенсорс в ближайшее время не планируется?
Эммм… ну если вы на сайт проекта глянете, то у нас и железо опенсорсное будет, и базовый софт. Сейчас к краудфандингу вот готовимся. Возможно какие-то кастомные разработки, которые под заказчиков делались, открыть не сможем, но стартовые вещи — откроем.
Супер, удачи в краудфандинге!
Мы стартанули: www.crowdsupply.com/virt2real/stereopi
Где можно попробовать?
А что именно попробовать?
Походить с такой штукой за спиной
Ну у меня она сейчас в Питере, можно договориться и встретиться. В Москве у Гола тоже есть связка стереопи и Окулус, но нету такой штуки на спину.
Идея крутая. Но вынесите камеру вправо или влево от центральной оси туловища (как-раз как это сделано во многих играх). А то голова закрывает пространство прямо перед испытуемым.
Есть одно большое отличие компьютерной игры от вашего прототипа — стабилизация. Когда игрок поворачивает своего персонажа или бежит, то камера не двигается и не дёргается по сути. В вашем же прототипа если человек наклонил корпус или изменил его положение, то весь мир «улетел» в другой pov, что конечно же сбивает с толку на раз два любой мозг.
Интереснее было бы реализовать именно систему стабилизации камеры относительно человека и расчёты для предугадывания следующего движения, ритма и всего остального.
Интереснее было бы реализовать именно систему стабилизации камеры относительно человека и расчёты для предугадывания следующего движения, ритма и всего остального.
Думаю, было бы неплохо реализовать это с использованием дрона. Тогда камера может летать за головой плавно во время ее поворотов. Как это и сделано в играх от 3 лица.
Вам доводилось видеть следы винтов среднего коптера на пальцах, руках и голове человека? Есть фотки на форумах радиомоделистов. Способен рассечь кожу и мясо до кости. Лично я бы, скажем так, повременил с таким применением до выхода безопасности дронов при полетах вблизи препятствий на новый уровень.
Думаю, можно использовать это вне помещений и надеть соответствующую защиту. Также, необязательно дрону летать на таком малом расстоянии, как у сабжа.
Затея вообще хорошая, но опасная если речь именно о близком положении и «виде от третьего лица». Если дрону подальше держаться — да, есть готовые и неплохие решения типа AirDog, когда дрон за вами следует. Но это немножко выходит за рамки нашего текущего эксперимента и тянет на достаточно большую исследовательскую работу. :-)
А какая получилась задержка между камерой и Oculus? Кармак на одном из выступлений говорил, что именно задержка (больше 20 мс) очень сильно влияет на вестибулярный аппарат.
Про задержку ответил в прошлом комментарии habr.com/post/428820/#comment_19328478
приветствую. какое будет разрешение файла при записи на sd?..
А есть где посмотреть 3д видео, то что на экране ноута мелькает? Чисто ради интереса интересуюсь
Sign up to leave a comment.
Ты в 3D от третьего лица: Oculus Go + Raspberry Pi