Как стать автором
Обновить

Вампирское зрение: как работает бесконтактное измерение пульса по видео

Уровень сложностиСредний
Время на прочтение4 мин
Количество просмотров1.6K
Всего голосов 9: ↑7 и ↓2+8
Комментарии22

Комментарии 22

Платить "улыбкой" без пульса больше неполучится ?

Проще будет отслеживать эмоциональные реакции на товары и информацию )

ага, смотреть на стоимость кредита или квартплаты

на самом деле, штука нужная. как вы знаете, в Московском транспорте за водителями (автобусов) очень тщательно следят - фитнес браслеты здоровья, камера открытости глаз и другие "жучки". так вот был случай, когда один водитель решил подшутить над системой и закрыл глаза - типа уснул. ну вот из-за него произошёл затор на дороге : система заблокировала автобус, к нему выехали медики/контролёры и сменщик. не помню, уволили его или нет, но из-за шутников МГТ влетел на деньги.

а тут хотя бы контроль будет, для меня как пассажира это прям плюсик к безопасности

Совершенно непонятно зачем именно водителям именно по видео. Китайцы вон рекламируют современные гигагерцовые радары, которые в состоянии охранную функцию нести и определять сердцебиение и дыхание даже через небольшие преграды итп. При этом стоят яб сказал подешевле камер.

Вот про такие не слыхал, спасибо за новую инфу. И да, солидарен: дешевле и эффективнее это приятнее. Но русские не ищут лёгких путей.

новый метод, который устраняет эти недостатки за счёт более эффективного подхода к регистрации и анализу видеосигнала. Вместо привычного цветового пространства RGB используется CIELAB

Не разбираюсь в этой области, но поиск по RPPG CIELAB тут же находит кучу всего, включая статью "An efficient non-contact heart rate measurement based on CIELab color space" от 2018 года. Естественно, возникает вопрос к реальной новизне.

В статье 2018 г., на которую вы ссылаетесь, достигнут очень скромный результат — уменьшение ошибки примерно на 5% по сравнению с другими работами, что очень мало. У нас ошибка уменьшалась в разы. Новизна не только и не столько в CIELAB, сколько в алгоритмах обработки. Они наши, оригинальные, и обеспечивают лучший на сегодня результат. Во всяком случае — лучший из тех, что мы встречали в научной литературе.

Спасибо за ответ, но вы же сами так написали, что из текста следует, что именно уход от RGB это главная новизна метода. Лучше бы поправить текст.

Вторая статья за последнее время про "новый" метод. Который вовсе и не новый

Метод новый безо всяких кавычек. Подробнее с ним можно ознакомиться в этой работе https://arxiv.org/abs/2502.02229. Веб-камеру тоже не автор изобрёл, ваш сарказм неуместен.

Кажется я знаю как это будет использоваться...
Кажется я знаю как это будет использоваться...

Вся суть — в обработке

Но не надо забывать об аппаратном обеспечении.

  1. Камера. Для опытов лучше использовать хорошую камеру , позволяющую получать несжатое изображение с приемлемой частотой кадров. Для этого подойдет ZWO ASI662MC. Камера дороговата, но сенсор - ширпотреб и дешевых камер на нем очень много, при этом очень хорошая чувствительность в ИК до 1000нм.

  2. Фильтр. Снять ИК фильтр - это хорошо. Но лучше использовать полосовой фильтр на 940нм с шириной полосы от 10 до 45 нм совместно с подсветкой на мощном VCSEL лазерном диоде (940нм, 2вт). Все это обойдется в 3000р на Aliexpress. В результате получите четкую картинку поверхностных кровеносных сосудов, независимую от внешнего освещения. Судя по спектрам поглощения оксигенированного и деоксигенированного гемоглобина более длинные волны (лазер 980нм, 2-3 т.р.) были бы возможно лучше. https://www.researchgate.net/publication/266162574_Infrared_Imaging_System_for_Analysis_of_Blood_Vessel_Structure

  3. Ну и далее можно совершенствовать в область hyperspectral imaging: https://ieeexplore.ieee.org/document/5332920

    https://pubmed.ncbi.nlm.nih.gov/37960594/

Вся суть в том, чтобы определять пульс удалённо через любую камеру на компе или телефоне. А иначе чем ваша хорошая спецкамера в кабинете отличается от измерителя давления и пульса в том же кабинете?

Спецкамера нужна для исследования проблемы, в частности, что можно сделать с обычной камерой, а что, как ни бейся, не получится. Для примера, попробуйте удалить IR-cut фильтр c камеры своего телефона, как описывают авторы этой публикации:

Для записи видео в эксперименте использовалась недорогая веб-камера Logitech 720p, из которой был удалён инфракрасный (ИК) фильтр. 

Кстати, в некоторых смартфонах есть вспомогательная камера, возможно изначально без ИК фильтра и даже с подходящим сенсором, необходимая для измерения глубины резкости. Но до нее еще надо добраться программно.

Ну, начали без ИК-фильтра, а там глядишь, и с ним смогут. Камера для расстояния (не глубины резкости) обычно очень грубая, 2 мп.

2 мп для красивой картинки маловато, а для определения пульса вполне достаточно. Кстати, если совмещать изображение такой камеры и основной, получим практически мультиспектральный анализ. Теоретически (именно теоретически) можно определять пульс и насыщение кислородом. Если ногти не крашеные, на ногтевой пластинке часто можно все это наблюдать невооруженным взглядом. Но лучше конечно пользоваться медицинским пульсоксиметром.

Лучше бы они придумали, как измерить сахар крови без прокола пальца и использования одноразовых тест-полосок.

Это система непрерывного мониторинга. Дорогая и требующая замены датчика. Мне она ни к чему - у меня 2 тип диабета. Мне нужно устройство вроде обычного глюкометра, но без прокола и тест-полосок. Чтобы я мог мониторить сахар пару-тройку раз в день. Как давление измеряю.

 Чтобы я мог мониторить сахар пару-тройку раз в день. Как давление измеряю.

Тоже уже придумали. Пальчик приложил и ага...

Но пока только начинают клинические исследования.

https://www.knowlabs.co/copy-of-bio-rfid

Лишь бы не оказалось очередной "чёрной водолазкой".

Зарегистрируйтесь на Хабре, чтобы оставить комментарий