Автоматическое улучшение стало доступно всем пользователям VK Видео: собственная технология NeuroHD сможет в два раза повышать разрешение и частоту кадров в роликах. Об этом Хабру рассказали в пресс-службе компании.
С помощью нейросети можно повысить разрешение до 720р, частоту кадров до 60 fps, убрать шумы и дрожание камеры. После оптимизации технологии появится возможность улучшать ролики до разрешения Full HD.
Чтобы сделать свои ролики качественнее, надо выбрать опцию автоматического улучшения при загрузке видео на платформу. Алгоритмы проанализируют ролик и предложат оптимальный вариант улучшения качества на основании внутренних критериев. Обработку можно включить для видео любой длительности и размера. Технология NeuroHD работает при загрузке видео через веб-версию «ВКонтакте».
ML-технология улучшения качества видео NeuroHD работает на основе нейросети из семейства генеративно-состязательных сетей (GAN). Принцип работы сетей GAN заключается в том, что их обучают на основе двух моделей. Первая генерирует увеличенные изображения, а другая проверяет их, чтобы они не отличались от настоящих. NeuroHD использует для улучшения кадра информацию о соседних фрагментах — так получается четкое изображение без «плавающих артефактов».
За счет большой библиотеки «VK Видео», на которой обучали технологию, нейросеть умеет повышать разрешение широкого спектра роликов: профессиональных и любительских, горизонтальных и вертикальных, динамических и статичных.
VK (бывшая Mail.ru Group) представила новую видеоплатформу «VK Видео» в октябре 2021 года. Она объединяет ролики из всех сервисов экосистемы. NeuroHD показали в декабре 2021 года — тогда функция была доступна не всем пользователям. В конце декабря компания также анонсировала отдельное приложение «VK Видео».
