Аспирант из США создал «ретушер пешеходов» для Google Street View

    image

    В последнее время только ленивый не обсуждал проблему использования личных данных из незащищенных WiFi сетей корпорацией Google. Последняя, понятное дело, признала свою вину и пообещала больше никога-никогда… Особых оснований не верить компании нет, так что многие интернет-пользователи решили отложить собственные протесты до следующего раза. Конечно, кроме указанной выше проблемы у Google достаточно много проблем с использованием и защитой частной информации различных людей. К примеру, таким проблемным является сервис Google Street View. Лично мне, как и многим другим пользователям хабрасообщества, глубоко фиолетово, что мы можем оказаться на очередном снимке, полученным гугломобилем. Но есть люди, которых очень беспокоит подобная проблема.

    Конечно, ведь перспектива оказаться на фото с неизвестной собственной жене девушкой под ручку рядом с сотрудником компании-конкурента не очень-то радует. Есть просто параноики, которые опасаются всего и всегда, включая «как бы чего не вышло», есть и нормальные люди, которым действительно нельзя или просто не хочется оказываться на подобных снимках. Решение этой проблемы корпорацией было отложено на неопределенный срок, поскольку удалить человека с фото, не испортив само фото, не так и просто (в подобных-то масштабах, десятки тысяч фото с тысячами человек на них).

    Зачем кому-то лицезреть улицы городов с белыми пятнами вместо пешеходов? Так вот, проблема уже решена, вернее, решение найдено, но пока не реализовано в системе Google Street View. Аспирант Университета Калифорнии создал «ретушер пешеходов», программу, которая автоматически заменяет людей кусочками близких к текстуре и цветовой гамме окружающего пейзажа. То есть работа системы состоит из двух этапов. Первый — собственно, удаление попавшего в кадр пешехода. Второй — замена образовавшейся пустоты аппроксимированными к цвету и текстуре окружающего пешехода фона кусочками графики. В общем-то, «ретушер» работает не идеально, погрешности видны и очень хорошо. Однако же они становятся явными, если знаешь, в каком месте был пешеход. А вот если просто «пролистывать» улицу, то шанс наткнуться на такое заретушированное место крайне мал. Иногда получаются любопытные курьезы — например, видна собака с натянутым поводком, который никто не держит, или там можно заметить кроссовки, которые стоят на тротуаре, «потеряв» владельца.

    image

    Лучше всего «ретушер» работает с более-менее однородными пейзажами, хотя отлично справляется и с более сложными заданиями, например, удалением человека с фона улицы с большим количеством деталей.

    В общем и целом, технология действительно интересная и во многом полезная. Остается, правда несколько вопросов. Например, что делать, если сфотографирована улица, или просто местность с большим количеством людей? Вероятно, подобные ситуации сложны для фильтра. В любом случае, ознакомиться с более подробным описанием новинки можно, скачав вот этот документ (pdf), где автор разработки описывает свое детище.

    А вот и первоисточник новости.
    Ads
    AdBlock has stolen the banner, but banners are not teeth — they will be back

    More

    Comments 88

      +13
      А на работу его уже приняли?
      • UFO just landed and posted this here
          +28
          Я думаю, потом еще какой-нибудь аспирант предложит заполнять пустые улицы мертвыми знаменитостями например :)
            +6
            Лежачими на тротуарах Лениными (или Ленинами?) :D
              +7
              Леннонами и Элвисами скорей
                0
                Джексонами
                +3
                Ленонами. :)
                +17
                google maps: zombie edition)
                0
                На пустые города вообще не захочется смотреть (один из основных страхов обычного человека то что он останется один), а вот смазывать лица (как в передаче «Человек и закон») было бы куда проще.
                  0
                  так вроде давно смазывают уже (даже иногда портреты-афиши под раздачу попадают)
                  видимо, это следующий шаг
                  +3
                  Было бы красивей заменить людишек на мультобразы, симпсонами =))
                  –18
                  Технология заливки объектов только была изобретена до него.
                    –5
                    Что не так я сказал?
                      0
                      Здесь речь идт не только о ретушировании, но и об идентификации объектов на карте.
                    +16
                    Ну так не интересно, иногда хочется посмотреть именно на людей, а не на улицы.
                    +16
                    судя по описанию, самая глупая реализация какую можно было придумать.
                    примитивный вариант content-aware fill.
                    это же видео! в подавляющем большинстве случаев, участок закрытый на одном кадре, будет открыт на другом!
                    и можно спокойно найти его и вытащить оттуда, ане ища текстуры в пределах одного кадра.
                    да, обработка более ресурсоемкая, но качество же много выше и ошибок меньше.
                      +13
                      и вы аспирант?
                        +1
                        А вы статью почитайте вместо того, чтобы пытаться угадать как работает алгоритм и не пишите глупости.
                          +10
                          да, используется именно такой метод… Значит молодец)
                          А marks как обычно, тупой копипастер, даже вкратце технологию описать не мог.
                          более того, то что написано, совершенно не соответствует сути технологии.
                          мда
                        +8
                        больше не будет бегающих перед гугломобилем водолазов((
                          +1
                          А где такие фотки с водолазами? Есть ссылка посмотреть? ;-))
                            +8
                            вот она — maps.google.co.uk/maps?f=q&source=s_q&hl=en&geocode=&q=rugdevein+30+Bergen&sll=60.391321,5.330558&sspn=0.016136,0.038495&ie=UTF8&hq=rugdevein+30&hnear=Bergen,+Norway&layer=c&cbll=60.360884,5.369468&panoid=vIlVwLm8kDoxekaRJ0MwdQ&cbp=12,275.75,,0,11.78&ll=60.360887,5.369654&spn=0,359.99673&t=h&z=19
                              +6
                              Извиняюсь за плохую ссылку, парсер лох
                              вот хорошая
                                +1
                                Представляете как водолазы обидятся, когда их сотрут!?
                                А вообще лучше когда с людьми.
                                  +2
                                  хе-хе
                                  тётка в окне желтого дома на втором этаже выглядит слегка озадаченной
                              0
                              А дороги-то не только в России оказывается такие бывают :) habreffect.ru/files/719/64c341358/123.jpg
                              +7
                              Если убрать людей теряется атмосфера улицы, город становится мертвым. К тому же будет весьма забавно посмотреть как он поудаляет манекенов из витрин и людей на печатной рекламе.
                                0
                                Американцев можно понять. Зафоткают что ты с любовницей целуешься на перекрестке, а через пару лет найдет кто-нибудь из друзей или знакомых и стукнет жене.
                                  +3
                                  У кого рыльце в пушку, то и воняет громче других :)
                                  «Ах, я теперь спокойно не могу любовницу поцеловать! Ах, гугл захавал мои педо-некро-зоо-запросы. Ах, они всё обо мне знают!»
                                  Есть отличный способ не бояться разоблачений — быть честным :)
                                    +2
                                    Вероятность та же, что и встретить друзей вживую. Раз это не смущает и вы целуетесь, то зачем тогда все переваливать на гугл?
                                    +2
                                    > Если убрать людей теряется атмосфера улицы, город становится мертвым.
                                    Вы видать в NFS не играли.
                                      0
                                      … город становится мертвым

                                      Не, ну пёсиков же не ретуширует. :)
                                      +6
                                      А почему бы просто не размазывать лица? В таком случае и пейзаж не страдает и иски подать не смогут
                                      • UFO just landed and posted this here
                                          +14
                                          А можно подать в суд за то, что лицо размазали? :)
                                        0
                                        Я думаю, это чуть-чуточку ппц. Просто надо на гугломобилях сделать яркий значок обозначающий фотографирование. И задержку в неделю перед выпуском фото где есть люди. Если человек не хочет чтоб его силуэт был опубликован, он просто указывает место на карте и говорит — уберите пожалуйста. Через автоматизированный интерфейс.
                                        Собственно, вероятность того что жена увидит его с любовницей на гуглофото сопоставимо с вероятностью что она увидит во время трансляции футбольного матча на трибунах, или во время репортажа. Ведь когда снимают уличные репортажи, людей же не вырезают.
                                        Да или просто подруга подруги может увидеть ее мужа с любовницей.

                                        Думаю, из-за единиц не должны страдать массы.
                                          +1
                                          Карты слишком много людей смотрит. Репортаж один раз посмотрели и забыли.
                                            +2
                                            Поверьте, репортаж больше людей.
                                            0
                                            Сижу я в Москве, скучаю.
                                            Пошёл на гуглмап, ткнул на первую попавшуюся улочку где-то в США и говорю: «А ну сейчас же уберите!», так что ли?

                                            Какие просторы для киберхулиганства!
                                              0
                                              И чего это вам даст? Не говоря уже о том что хорошо бы американский IP иметь :-)
                                                0
                                                Мне это, конечно, ничего не даст да и нафиг не нужно. Но любители похулиганить всегда найдутся.
                                                Для американского IP достаточно найти подходящий прокси.
                                                  0
                                                  Вы думаете тем кто знает что такое прокси-сервер оно надо?
                                            +1
                                            И машины тоже пусть уберут, ага. И будем на мёртвые города смотреть.
                                              +8
                                              А можно Google за деньги размещать там вместо простых машин суперкары нужных марок, вместо обычных людей — знаменитостей или кандидатов на выборах, рекламные банеры менять тоже на другую, актуальную рекламу… Только это уже получится какой-то другой, нереальный мир…
                                                0
                                                А что, вот есть бигборд. На бигборде реклама, владелец которой заплатил владельцу бигборда икс денег за игрек времени (предполагая зет просмотров). А гугл, сфотографировав, добавляет лямбда просмотров за свой счет. С одной стороны я в яндекс-панорамах, бывает, ориентируюсь как раз по рекламе (ага, дом обычный, но реклама вот того бара в яндексе была здесь, значит это правильный дом). Но всё равно гугл не обязан содержимое этого бигборда оставлять достоверным. Пусть будет географически-контекстная реклама, твиттер и форсквар в помощь.
                                            +3
                                            Пустой город с искарёженными контурами дверей и окон (там, где были люди) будет выглядеть ужасающе…
                                              +2
                                              Нашествие хищников блин.
                                                +2
                                                Интересно посмотреть как оно отретуширует скопление людей
                                                  0
                                                  Есть фотки, где людей — сотни, как минимум. Как оно от туда их убирать будет?
                                                    +1
                                                    А я бы на спинах людей в street view, adsense рекламу вставлял… :)
                                                      0
                                                      На лицах лучше — двух зайцев.
                                                      0
                                                      Потом надо будет сделать слой с разбитыми окнами и растительностью на улицах… И получатся декорации к фильму «Я — легенда».
                                                        +11
                                                          +9
                                                          svedetel' detected
                                                          +4
                                                          Молодец он конечно. Взял давно известную технологию обнаружения людей и давно известную технологию генерации текстур. Прямо-таки аспирантский уровень!
                                                            +4
                                                            В том-то и дело, что он это всё взял и совместил. Аспирантский не аспирантский уровень, но он ведь додумался сделать это
                                                              –4
                                                              Для этого не нужно быть гением. И даже аспирантом.
                                                                0
                                                                а что по вашему должны делать аспиранты?

                                                                имхо вполне аспирантский уровень. Фундаментальщины (которая, если разбираться, покажется такой же «легкой» как и эти «общеизвестные» алгоритмы [много НЕ занимающихся цифровой обработкой знакомых?]) на всех не хватит.
                                                                  +3
                                                                  А вы тогда почему это не сделали раньше если идея на поверхности лежит?
                                                            +1
                                                            с другой стороны какое раздолье людям, которые верят в паранормальщину.
                                                            вот оно, доказательство их правоты — весь город так и кишит призраками)
                                                              0
                                                              Надо каждому параноику дать доступ к замазыванию лиц на фотографиях улиц. Так что бы они сами сидели на Google Maps, искали бы места где они были в непубличном виде и при необходимости замазывали свои рожицы :)
                                                                +1
                                                                А где гарантия что он именно себя будет замазывать? :) Я может быть не хочу чтоб меня замазали, равно как те аквалангисты на улице :))
                                                                  0
                                                                  Я думаю у этого способа есть еще много недостатков. Но смысл в том, что бы параноики заботились о своей конфедициальности сами :)
                                                                    0
                                                                    Не стоит усугублять их психическое расстройство, это негуманно.
                                                                +5
                                                                Вообще-то эту технологию уже придумали лет 5 назад, если не больше, в Microsoft Research
                                                                0
                                                                Не «аспирант Университета Калифорнии», а «аспирант университета Калифорнии в Сан-Диего»
                                                                  0
                                                                  осталось написать фильтр, убирающий собак и прочих животных…
                                                                    +2
                                                                    А потом убирающий деревья и прочую растительность. А потом убирающий все кроме домов. А потом окажется что фотки не похожи на то что есть, поэтому дома тоже, в принципе, можно убрать.
                                                                      0
                                                                      Можно оставить каркасную модель. :)
                                                                    0
                                                                    без людей картинка не реалистична, не дает полного представления о конкретном месте, но бывают случаи когда люди просто мешают, закрывают обзор и пр.
                                                                    хорошим решением было бы сделать опционально, два варианта: с людьми и без
                                                                      0
                                                                      Если человек на фото закрыл что-то ценное, то ретушь это место не вернет. Так что смысла нет.

                                                                      Я бы на месте гугл официально анонсировал, что себя убрать можно, но только через суд, доказав что на ливстрит именно ты. Сотня исков от самых параноидальных дошла бы, остальные бы расслабились и перестали морочить голову.

                                                                      Да и от «застуканных» меньше бы исков стало — пусть потом жене своей объясняет, зачем ему понадобился судовой процесс с гуглом.
                                                                      0
                                                                      А цензурными прямоугольниками на глаза обойтись нельзя бы было?
                                                                        0
                                                                        Мне кажется, что как бы глубоко люди не зарывали голову в песок и как бы не возмущались тем, что про них все известно… это становится неизбежностью. Личная жизнь перестает быть таковой. Увы.
                                                                        • UFO just landed and posted this here
                                                                            –1
                                                                            я знаю «выход» — нужно всем американцам ходить в масках и шептать как молитву «несфотографируйменягугломобиль несфотографируйменягугломобиль», точно поможет
                                                                              0
                                                                              аспирант конечно молодец, но с людьми как то поживее смотрится, пустые улицы угнетают.
                                                                                0
                                                                                Когда я смотрел StreetView неожиданно увидел прогуливающуюся подругу моей жены с сыном. Хоть лица были замазаны, но их изображения 100% угадывались.
                                                                                  0
                                                                                  Интересно, а как оно будет вырезать множество людей
                                                                                    0
                                                                                    В гугле люди с понимаем относятся к защите личных данных. А что делать с Яндексом?
                                                                                    maps.yandex.ru/-/CNaaI.A
                                                                                      0
                                                                                      Людей полностью убирать не круто. Вот бы черные контуры оставлять…
                                                                                        0
                                                                                        Сейчас ещё и ботов научат фотошопить…
                                                                                          0
                                                                                          Блин, я в этом здании (которое с номером 609) работал, пока контора не переехала в прошлом году).
                                                                                            0
                                                                                            Людей на рекламных баннерах тоже будет затирать?

                                                                                            Only users with full accounts can post comments. Log in, please.