Раскрашивание изображений с использованием нейронных сетей

[static_cast]

• У Чаплина были голубые глаза

• Гимнастерки летчиков РККА времен ВОВ были зеленые. В серые цвета одевались их визави.

• "Металлические" дубовые листья в петлицах у офицеров СС зеленью не отдавали, несмотря на календарную весну.

и т.д., и т.п. ордена, звезда, цвет манжет, цветастая повязка и прочее.

Понимание того, что нейронка не магический кристалл прошлого, а очень своеобразный фильтр-"черный ящик", не восстанавливающий, а трактующий входные данные, есть не у каждого. Мы живем в эпоху постправды, когда проверить всю поступающую информацию уже не представляется возможным, и очень интересно, куда мы все таки придем в восприятии себя и своего прошлого.

[0mogol0]

а это должно быть темой следующей статьи, как доработать нейронку, чтобы она выдавала более корректные результаты...

[sunnybear]

И лицо Мюллера багрово-красное из-за повышенного давления ...

[Moskus]

Хуже всего - то, что:

• множество людей реальное прошлое уже совершенно не интересует, а интересуют "фактоиды", то есть утверждения (включая изображения) которые просто выглядят правдоподобно, но не имеют никакой реальной фактической точности,

• люди считают подобные фактоиды, содержащие выдуманные детали, лучше реальных фактов, содержащих меньше деталей (скажем, не содержащих информацию о цвете вообще),

• как результат, реальные факты планомерно "вымываются" из обращения и их оказывается все сложнее найти, например - уже есть всякого рода псевдоисторические каналы в соцсетях, публикующие только визуальные фактоиды (потому что см. предыдущий пункт) без какого-либо упоминания о том, что это не исторически точные изображения.

[altyshevamaria]

1984 Оруэлла вспоминается :(...

[Alexufo]

Практическое применение deoldify на сколько я знаю только у myheritage, автор продал им более качественную модель. Интересный пиар проект.

[Moskus]

Что вы этим хотите сказать? Что вымывания не происходит, или что-то другое?

"Пиар-проект" не может быть интересным, это всегда какой-нибудь обман.

[Alexufo]

я спрашивал у сотрудников музея, как они относятся к восстановлению недостающих моментов исторических документов нейронками. Они сами их используют. Любой визуал привлекает аудиторию т.е бабло, это выполняет цель и задачу искусства — передать полноту ощущения, а это важно для того же самого исторического документа. А сохранность никуда не денется. Пена дилетантства или вымывания и без нейронок всегда и так была.

[geekmeek]

Что ещё бросилось в глаза то, что растительность поля за дорогой в цветном варианте кажется разреженной, растущей на не плодородной песчаной земле. А в чёрно-белом варианте поле с густой растительностью, просто с разнофактурным отсвечиванием оттенков, которое ИИ вероятно воспринимает как участки открытой земли.

Быть может наоборот мой И фильтрует с искажением от полей моего прошлого...

[holyx]

""Металлические" дубовые листья в петлицах у офицеров СС зеленью не отдавали, несмотря на календарную весну."

Да, смотрится так, как будто школьник в учебнике зелёным фломастером разукрасил. Сразу вспомнился отреставрированный фонтан "Каменный цветок" на ВДНХ, где новые пластиковые камни "намного лучше", чем старые натуральные.

"куда мы все таки придем в восприятии себя и своего прошлого "

Уже местами народ к чему-то виртуальному приходит. Например, пол по собственному ощущению, без привязки к физиологии.

[altyshevamaria]

По-моему, это потрясающе...

[xshd]

интересно было бы почитать на тему апскейла, скажем с 1000px до 2000px, и желательно не портреты - на примере отрендеренной картинки

[Alexufo]

сетка тренируется на обесцвеченных цветных фото. Поэтому цвет кожи всегда пластик на большинстве изображений, там совсем другие законы наложения цвета должны быть.

[Skigh]

Все фотографии, кроме третьей, «раскрашиванием» только испорчены.

[PereslavlFoto]

Третья не раскрашена, а тонирована. Там всё в одну краску сделано.

[MichaelBorisov]

А это потому, что в нашем мозгу имеется встроенный «раскрашиватель». Хотя результаты его работы и не воспринимаются так, как будто их видят глаза, но на эмоции явно влияют.

А тут, на раскрашенной с помощью нейронки фотографии, внутренний «раскрашиватель» отключается, так как кажется, что его работа не нужна. Отсюда и худшее эмоциональное восприятие.

Здесь я вижу сходство с системами подавления шума в аудиозаписях. Большинство «отреставрированных» записей я бы лучше слушал с шумом, который там изначально был. Ведь в ходе «реставрации» теряются слабые звуки заднего плана, придававшие музыке особый колорит.

[Skigh]

Нет, это потому, что качество раскраски очень низкое, очевидно бракованные элементы бросаются в глаза. Хорошая нейросеть (например в голове толкового художника) вполне может раскрасить ч/б фото так, что оно будет восприниматься лучше.

[basnopisets]

Но зачем?

[Moskus]

Потому что "пипл хавает", то есть рядовому индивидууму это чаще нравится больше, чем оригинал.

[Moskus]

Для тех кто в танке - я это не оправдываю, а наоборот. Но многим людям действительно больше нравится это раскрашенный позор, чем оригиналы.

[piton_nsk]

Напомнило

Слабонервным не смотреть

[VaalKIA]

Разные длины волн, преломляются по разному (фиолетовый и красный имеют разные фокусы у нас в глазу, поэтому это сочетание, буквально — вырвиглазное, то же и с оптикой), возможно, по ореолам можно с высокой долей вероятности судить и о спектре. Ничего не могу сказать о фотографии, но в видео, один раз вычислив на удачном кадре, далее можно будет использовать эту информацию и постепенно раскрасить все детали.

[vasilisc]

Игрался так же с этой нейронной сетью DeOldify. У неё официально на странице упоминается негативный эффект "зомби". Конечности людей часто окрашиваются в пепельный цвет. На странице проекта достаточно поискать слово zombie.

https://github.com/jantic/DeOldify