Медицинская маска больше не спасает от распознавания лица



    Если вы думали, что медицинская маска обманет камеры распознавания лиц, то для вас есть две плохие новости. Во-первых, исследователям удалось значительно усовершенствовать системы машинного зрения, так что теперь распознавание достаточно надёжно выполняется по половине лица или по области глаз (по половине лица уровень успешного распознавания составляет 90%).

    Вторая плохая новость, что вспышка коронавируса подтолкнула китайских производителей SenseTime, FaceGo, Minivision внедрять технологии распознавания частично закрытых лиц в коммерческие модели видеокамер. Из-за вспышки Covid-19 много граждан стали выходить на улицы в масках — поэтому приходится модернизировать системы видеонаблюдения.

    Новые формы распознавания лиц теперь могут распознавать не только людей в масках, закрывающих рот, но и людей в шарфах или с фальшивыми бородами. Одна из первых научных работ на эту тему была опубликована ещё в 2017 году, это статья «Идентификация маскированных лиц (DFI) по ключевым точкам с использованием пространственной свёрточной сети» (Disguised Face Identification (DFI) with Facial KeyPoints using Spatial Fusion Convolutional Network; arXiv:1708.09317v1).


    Образцы из набора данных для обучения нейросети

    Как известно, распознавание лиц работает путём идентификации на лице человека нескольких ключевых точек — и их соединения, в результате чего формируется уникальная «графическая» подпись. Эти ключевые точки обычно находятся вокруг глаз, носа и губ. Чтобы система могла работать при закрытой нижней половине лица исследователи расположили больше ключевых точек вокруг глаз и носа.


    Структура свёрточной нейросети в системе DFI

    Нейросеть в системе DFI находит на фотографии лица 14 ключевых точек, но точность падает в зависимости от уровня маскировки и сложности фона позади человека.

    Однако с 2017 года проведено больше исследований на эту тему, а теперь очевидно, что технология имеет большую коммерческую ценность. Первым свою систему распознавания лиц адаптировал китайский лидер в области ИИ-разработок SenseTime, о чём компания объявила на прошлой неделе.

    В пресс-релизе SenseTime говорится, что её алгоритм «предназначен для считывания 240 ключевых точек лица вокруг глаз, рта и носа». Он может найти соответствие, используя только те части лица, которые видны. Другими словами, ключевых точек даже вокруг глаз может быть достаточно для составления уникального отпечатка, пусть и частичного отпечатка лица.


    Система SenseTime

    Исследователи из Брэдфордского университета под руководством профессора Хассана Угайла (Hassan Ugail) в мае 2019 года сообщили об улучшенной модели распознавания лиц, добившись точности распознавания 90% на половине лица и 100% по трём четвертям лица. Научная статья «Глубокое распознавание лиц с использованием несовершенных данных о лицах» ("Deep face recognition using imperfect facial data") опубликована в журнале Future Generation Computer Systems (doi:10.1016/j.future.2019.04.025).

    Другая китайская компания по распознаванию лиц Minivision утверждает, что их программное обеспечение тоже теперь способно распознавать людей в масках. Столкнувшись со вспышкой Covid-19 и массовым выходом на улицу людей в масках, Minivision начала экстренную кампанию по сбору данных для дообучения модели. «Руководство срочно мобилизовало сотрудников и родственников для сбора ограниченного набора данных за два дня. Ключевой информацией, которую система регистрировала на лицах в масках, были глаза», — пишет издание Abacus.

    Спешка вызвана жёсткими мерами Китая по борьбе с эпидемией. Во многих жилых районах, наиболее пострадавших от вируса, вход ограничен только для жителей района. Minivision внедрила новый алгоритм в свои системы распознавания лиц для блокировки ворот в сообществах в Нанкине, чтобы быстро распознавать жителей без необходимости снимать маски.



    Программы SenseTime и FaceGo используются преимущественно для распознавания сотрудников компаний (для учёта рабочего времени).

    Когда выборка ограничена жителями одного района или компании, то задача системы распознавания лиц на порядок упрощается. Расширить эту систему на более широкую группу людей будет трудно. Когда выборка достигает определённого масштаба, то система скорее столкнётся с людьми с похожими глазами. В этом случае повышается риск ложных срабатываний.

    Впрочем, биометрические системы быстро развиваются. Возможно, когда-нибудь камеры смогут на расстоянии считывать даже радужную оболочку глаза и отпечатки пальцев. Разрабатываются удалённые сенсоры сердцебиения, температуры тела, системы идентификации человека по походке. Кроме того, люди часто носят с собой смартфоны и другие электронные устройства, по которым их можно скрытно идентифицировать.




    Подробнее о PKI-решениях для предприятий у менеджеров GlobalSign +7 (499) 678 2210, sales-ru@globalsign.com.
    GlobalSign
    Компания

    Комментарии 62

      +1
      А если в противогазе — смогут распознать или нет? Типа ГП-5.
      • НЛО прилетело и опубликовало эту надпись здесь
          +6
          Я милого узнаю по походке (с)
          • НЛО прилетело и опубликовало эту надпись здесь
              0
              Данные о походке человека уже можно взять считывая данные с датчиков смартфона который с нами везде и всюду, при этом делать это можно даже без нашего с вами ведома и разрешения
            –1
            Тебя по юзернэйму и минус карме :)
            0

            Дело товарища Бертильона живёт и пока побеждает. Следующий ход? Маски, рандомно подчёркивающие эти самые характерные точки?

              0
              Грим и широкое распространение моды на косметику для всех полов и ориентаций.
                +3
                Массовый косплей капитана в метро и на улицах?
                image
                  0
                  Маска Ктулху сработает лучше.
                +1
                Именно так.
                Более того, по паре-тройке шагов, снимаются полностью параметры скелета.
                0

                разблокировка лицом ещё на Nexus 6 бороду и шарф игнорила, а нынешняя камера видит улыбку, когда нижняя половина лица закрыта

                  +3
                  эмм… вообще инъекции физрастора в эти области полностью блокируют распознание. Ненадолго — физраствор быстро рассасывается, около пары часов, можно конечно его замедлить… но так или иначе 3-4 укола и камера вас уже не узнает. Как вариант — использовать живую осу, пару тычков жалом и морду поведет на сутки — полностью безвредно и безопасно.
                    0
                    эмм… вообще инъекции физрастора в эти области полностью блокируют распознание.

                    Вы проводили исследование? Или голая теория?
                      +7
                      С осами и пчёлами проверял — мама не узнает!
                        +1
                        Вы что, не смотрели «Особое мнение» с Томом Крузом?!
                        0

                        Силиконовый грим менее болезненно))))

                          0
                          В нас пропал дух авантюризма…
                          0
                          полностью безвредно и безопасно.

                          Насчёт этого я не был бы так уверен — у некоторых особей рода человеческого встречается жесточайшие аллергические реакции на осино/пчелиный яд, вплоть до анафилактического шока и отёка Квинке.
                            0
                            Насчёт «безвредно и безопасно» — большие сомнения.
                            0
                            Берём обычную маску и рисуем на ней верхнюю часть чужой головы. Трёхмерные модели оно, всё-таки, не строит.
                              0
                              В итоге получится две верхних части головы, своя и нарисованная?
                                0
                                Ага, и эту штуку вполне может переглючить. Но может и оба лица распознать.
                              0
                              90% это же очень мало, особенно когда используется для распознавания в толпе.
                                +2

                                Видимо, вскоре будут делать три фото для паспорта — обычное, в медицинской маске и в противогазе )

                                  +1
                                  А еще — в спальнике, голым, в бинтах…
                                    0
                                    И в чёрном пакете с молнией.
                                      0
                                      в багажнике, ночью, в лесу.
                                    0
                                    А так же в ИК-диапазоне. Тепловой рисунок лица тоже уникален, хотя сам нестабилен и зависит от внешних и внутренних условий.

                                      0
                                      синяк, думаю, поменяет тепловой рисунок лица
                                        0
                                        даже пудра тостым слоем его может поменять.
                                          0
                                          Просто пудра только снизит «свечение» равномерно. Это надо специальную, двухкомпонентную, чтобы получались маскирующие линии и пятна.
                                    +2

                                    Идея для бизнеса: продавать медицинские маски для лица, на которых нарисовано лицо

                                      0
                                      Какое-то время уже есть.
                                        +1
                                        Такие?
                                        +3
                                        Н-да. Вообще говоря, в свете таких обстоятельств надо четко прописывать, что лицо, походка, голос, отпечатки пальцев — и вообще вся физиология — есть персональные данные и ратовать за ощутимые наказания за неправомерный съём и/или разглашение.
                                        Но тоже палка о двух концах. Сфоткал исторический памятник — а в кадр другие люди попали. А нельзя.
                                          0

                                          Задетектить абсолютно все лица на фото и заблюрячить их силами самой камеры/телефона локально — технологически весьма просто. А при первом включении обучать фотоаппарат узнавать родственников и хозяина :-)


                                          Японцы, например, и так уже вручную в твиттерах всяких замазывают лица случайных людей, попавших в кадр, на фото с массовых ивентов. Но, имхо, выглядят такие фотки совершенно по-уродски.

                                          • НЛО прилетело и опубликовало эту надпись здесь
                                          0
                                          Я вот все вспоминаю, что даже обычное распознавание лица часто ложно срабатывает на больших объемах проверки, а тут по половине лица…
                                            0

                                            Так развивают же ) Скоро мы все придём в дивный чудный мир сферы образца 80-х годов прошлого века.

                                            +4
                                            Я тут себе приобрёл толстовку от одной известной компании. Так у неё в капюшоне проставка, которой можно полностью закрыть лицо сеточкой. Анонимусам на заметку
                                            Фотопруф
                                            image
                                              0
                                              Дамам проще, вполне могут вернуться в моду вуали…
                                                +3
                                                Магометанки вообще не понимают проблемы.
                                                0
                                                а для такие случаев будет «пройдемте гражданин».
                                                  0
                                                  сколько лет хожу — ни разу не останавливали
                                                  вру! один раз тормознули пьяные казаки, но они были посланы на хутор
                                                    0
                                                    Это был юмор. Но можно сделать по другому — например если фейс не распознан не пустят в общественное место. Просто турникет в метро не откроется. В московском метро турникеты уже оборудованы камерами )
                                                0
                                                Можно временно перенимать чужую личность методом Лектора Г.
                                                    +1
                                                    Чего только не придумают, лишь бы не чипировать. Кстати, в Китае это вполне можно сделать принудительно. Почему еще нет?
                                                      0
                                                      А что с этими чипами делать-то потом? Дальность очень посредственная.
                                                        0
                                                        Рамки по всему городу, в зданиях и т.д…
                                                        0

                                                        Отторжение, поломка чипа не проблемы?

                                                          +1
                                                          Проблемы. Исключительно носителя.
                                                        +2
                                                        Отторжение, поломка чипа не проблемы?

                                                        Ровно до тех пор, пока во все дверные ручки не будет встроено распознавание чипа. Когда без чипа, пардон, в сортир не попасть будет, тогда они перестанут ломаться и отторгаться.
                                                          0
                                                          Перчатка со сменными чипами?
                                                          0
                                                          Следующий ход — массовый сбор метаданных. Маркировка человека по чему угодно — по цвету маски, походке, одежде, и т.п… Накладываем на перемещения, на данные с камер когда лицо открыто/закрыто, и т.п… и через какое-то время всех промаркируют. Вышел из дома кто-то в желтых ботинках и маске в 7 утра с собакой? Ага! Скорее всего это И.И. Иванов! Читал хабр и ехал на 975 автобусе в Пекин осенью? Это видать П.П. Петров!
                                                          Многомерность пространства признаков здорово упрощает задачу.
                                                          Что делать-то?
                                                            0
                                                            Что делать-то?

                                                            Расслабиться и постараться получить удовольствие. Будущее уже здесь.
                                                              0
                                                              А все ли хотят такое будущее?
                                                                0
                                                                А все ли хотят такое будущее?

                                                                А всех ли спросят, чего они хотят?
                                                                  0
                                                                  А все ли понимают последствия? «Мне нечего скрывать» и всё на этом.
                                                                    0
                                                                    Это и печалит…
                                                                0
                                                                Медицинская маска обычно полностью закрывает нос, а не оставляет его открытым. Поэтому образцы из набора данных для обучения нейросети выглядят как минимум странно.

                                                                Только полноправные пользователи могут оставлять комментарии. Войдите, пожалуйста.

                                                                Самое читаемое