Хабр Курсы для всех
РЕКЛАМА
Практикум, Хекслет, SkyPro, авторские курсы — собрали всех и попросили скидки. Осталось выбрать!
Хабр доступен 24/7 благодаря поддержке друзей
Комментарии 39
Какой объектив использовался при съемки КДПВ? Обычный смартфонный или специальный высокого качества?
По сути идея совсем не нова. Еще 5 лет назад выпускалась Люмия 1020 с 41 мегапикселом на борту. На нее даже кино какое-то снимали помнится :)
А до нее в далеком 2012 была Nokia 808 PureView. Но оба варианта скорее вчсего использовали и программые трюки для получения снимков
Nokia 808 как раз была фактически фотоаппаратом в форм-факторе смартфона.
А вот Lumia 1020 — тут уже вопросы.
А вот Lumia 1020 — тут уже вопросы.
Никаких трюков — https://habr.com/post/222845/
А в 2007 была Nokia N93i, на которую сняли, ЕМНИП, какой-то фильм для МТВ о премии «Каннские львы». Честный оптический зум, 480@30фпс
Кадры размером 8000×6000 пикселей при размере сенсора 6,4×4,8 мм — это 1250 пикселей на милиметр (625 пар линий на миллиметр). Где они возьмут объективы с хотя бы близкой разрешающей способностью — я не знаю.
Может они будут делать хитрую постобработку используя характеристики конкретного объектива?
Помнится, теория говорит, что для объектива с относительным 1/1.8, радиус кружка Эри будет около микрона (1.22*0.54*1.8).
Да тогда он не сможет полностью реализовать разрешение такой матрицы, нужно ещё светосильней.
Да тогда он не сможет полностью реализовать разрешение такой матрицы, нужно ещё светосильней.
в реальности всё ещё сложнее.
в матрице в каждом пикселе нет всех RGB компонент,
красный синий и зелёный расположены в разных соседних пикселях,
поэтому при интерполяции цвета вылазят цветовые артефакты где цвет меняется,
их в минус бесконечность децибел задавить нереально,
поэтому ставят физический НЧ фильтр после линз, чтоб разница между цветами между блоками пикселей 2х2 — 6х6 (в случае фуджифильма и экзотики) была минимальной.
поэтому можно предположить что вместо НЧ фильтра уменьшение размера пикселя — ещё один способ обойтись простой MHC или улучшеной билиниариальной интерполяцией которая требует 10-20 операций на пиксель а не тысячи — десятки тыщь на пиксель как в нормальных алгоритмах обработки RAW изображений — дешевле ДСП процессор и возможно это позволит упростить сам процессор так что станет дешевле вся система в целом.
При этом фактическое разрешение объектива не сильно важно как «натуральность картинки», после агрессивных алгоритмов цветовой интерполяции вылазит много артефактов уже не цветовых — края усиливаются и появляются каёмки, цвета уползают а в мелких деталях исчезают вообще, картинка в целом блеклая а после обратного усиления цветов выглядит немного странно если первоисточник сравнивать, алгоритмы интеполяции «додумывают картинку», 1 может стать L, 8 в 0, появляются узоры и «лабиринты», «лестницы» на ровном фоне, и вообще видит иллюзии прям из занимательной нейрооптики. И чем сильнее алгоритм цветовой интерполяции давит цветовые артефакты тем больше он «додумывает» и больше ему видится иллюзий, либо в тыщи раз больше вычислений.
В нашей компании берут часто матрицы 8-16мегапикселей и делают из их данных 2-4 мегапиксельный SDI выход — это проще и дешевле в разы чем делать сложный DSP проц на тыщи FPS.
но это только мои догадки на основе только опыта только моего работодателя.
добавлю уточнение термина: цветовые артефакты они же false color или 偽色 (на работе используется только японский)
в матрице в каждом пикселе нет всех RGB компонент,
красный синий и зелёный расположены в разных соседних пикселях,
поэтому при интерполяции цвета вылазят цветовые артефакты где цвет меняется,
их в минус бесконечность децибел задавить нереально,
поэтому ставят физический НЧ фильтр после линз, чтоб разница между цветами между блоками пикселей 2х2 — 6х6 (в случае фуджифильма и экзотики) была минимальной.
поэтому можно предположить что вместо НЧ фильтра уменьшение размера пикселя — ещё один способ обойтись простой MHC или улучшеной билиниариальной интерполяцией которая требует 10-20 операций на пиксель а не тысячи — десятки тыщь на пиксель как в нормальных алгоритмах обработки RAW изображений — дешевле ДСП процессор и возможно это позволит упростить сам процессор так что станет дешевле вся система в целом.
При этом фактическое разрешение объектива не сильно важно как «натуральность картинки», после агрессивных алгоритмов цветовой интерполяции вылазит много артефактов уже не цветовых — края усиливаются и появляются каёмки, цвета уползают а в мелких деталях исчезают вообще, картинка в целом блеклая а после обратного усиления цветов выглядит немного странно если первоисточник сравнивать, алгоритмы интеполяции «додумывают картинку», 1 может стать L, 8 в 0, появляются узоры и «лабиринты», «лестницы» на ровном фоне, и вообще видит иллюзии прям из занимательной нейрооптики. И чем сильнее алгоритм цветовой интерполяции давит цветовые артефакты тем больше он «додумывает» и больше ему видится иллюзий, либо в тыщи раз больше вычислений.
В нашей компании берут часто матрицы 8-16мегапикселей и делают из их данных 2-4 мегапиксельный SDI выход — это проще и дешевле в разы чем делать сложный DSP проц на тыщи FPS.
но это только мои догадки на основе только опыта только моего работодателя.
добавлю уточнение термина: цветовые артефакты они же false color или 偽色 (на работе используется только японский)
У самсунга уже есть объектив со светосилой 1/1.5 и в целом, еще есть куда стремиться, скажем в 1/1.4 нет ничего невероятного, и уж он то разрешит эту матрицу, пусть и только в центральной области.
Можно свой вариант?
Я всё понимаю, прогресс и всё такое…
Но лично мне не интересно чего они сейчас продают, мне интересно как они смогли нагнуть законы физики!
Ведь получается что через дырочку диаметром в 1мм тусклый свет делится ещё на 48 миллионов, + ещё на 90 (кадров в секунду), после чего получается яркая презентабельная картинка… бред сумасшедшего менеджера.
А размер пикселя? Каким образом светочувствительный элемент равный длине волны может различать (фильтровать) отдельную частоту???
И ещё.
С такими выкрутасами над бедной физикой, в продаже просто обязаны появиться монстры для гиков, в формате больших и тяжёлых зеркалок. Способных фотографировать бактерии на расстоянии в сотни метров.
Однако зеркалки есть, но бактерии они не видят. У них ведите-ли запрет на нарушение физики.
Но лично мне не интересно чего они сейчас продают, мне интересно как они смогли нагнуть законы физики!
Ведь получается что через дырочку диаметром в 1мм тусклый свет делится ещё на 48 миллионов, + ещё на 90 (кадров в секунду), после чего получается яркая презентабельная картинка… бред сумасшедшего менеджера.
А размер пикселя? Каким образом светочувствительный элемент равный длине волны может различать (фильтровать) отдельную частоту???
И ещё.
С такими выкрутасами над бедной физикой, в продаже просто обязаны появиться монстры для гиков, в формате больших и тяжёлых зеркалок. Способных фотографировать бактерии на расстоянии в сотни метров.
Однако зеркалки есть, но бактерии они не видят. У них ведите-ли запрет на нарушение физики.
+1
Скорее всего изначально надо понимать, что есть матрица на 12 МП + софт, который доводит картинку до уже нужных 48 МП. В рекламах уже не раз были замечены снимки сделанные на топовые зеркалки, которые в будущем выдавали за снимок со смартфона.
>в продаже просто обязаны появиться монстры для гиков, в формате больших и тяжёлых зеркалок
Ну, не зеркалка, конечно, но тоже нечто странное.
Ну, не зеркалка, конечно, но тоже нечто странное.
Собственно берем телескоп, делаем к нему адаптер а ля макролинза (иначе не сфокусируется), адаптер для цифрозадника и вперед, снимать бактерии с предметного стекла за 100м. Солнце выступит подсветкой. ;-)
Обработка сигнала цветным фильтром Quad Bayer с несколькими алгоритмами для повышения разрешения
Мне кажется, или «с несколькими алгоритмами» это и есть «программная интерполяция», просто не силами ПО смартфона а силами контроллера камеры?
Производители флэш-памяти для смартфонов довольно потирают руки.
Подготовил для Sony аутентичный маркетинговый материал, демонстрирующий характеристики сенсора IMX586:
Физический размер сенсора составляет 1/2" или 6,4×4,8 мм. Это большой размер — самый большой, какой только ставят в смартфоныЭто, мягко говоря, неправда.
В качестве примеров можно привести как продающийся в данный момент Huawei P20 Pro с матрицей 1/1.7", так и старенькую Nokia 808 с матрицей 1/1.2".
Лучше бы что-нибудь с шумами бы сделали и размером матрицы, а то толку от этих мегапикселей в сумерках.
В тему:
Зарегистрируйтесь на Хабре, чтобы оставить комментарий
48 мегапикселей для смартфона