Редактирование видео в MPC с помощью шейдеров

Есть задача: Изменить видео “на лету” при воспроизведении — поменять местами правую и левую часть. Не отразить, а именно поменять, т.е. разрезать картинку на две части и поменять их местами. Можно, конечно, сделать с помощью фреймсервера типа AviSynth'a, но это уже не совсем “на лету” — надо писать скрипт для каждого видео файла. Хочется сделать это быстро и без напрягов.

На фига? Чтобы сделать курс лекций по машинному обучению от Яндекса более удобным для просмотра. Лектор указывает на пункты презентации вживую, и приходится постоянно перескакивать через весь экран взглядом, чтобы понять, о чём речь:

image

Решение


Используем инструмент шейдеров, доступный в Media Player Classic. В стандартном комплекте есть несколько готовых шейдеров для правки изображения — “Emboss”, “Grayscale”, “16-235 to 0-255” и тому подобные. Нужного нам там нет, поэтому создаём новый шейдер (небольшая программа на языке HLSL):

sampler s0 : register(s0);
 
float4 main(float2 tex : TEXCOORD0) : COLOR
{
	// swapLine 0.5 = in the middle
	float swapLine = 1082.0 / 1920.0; 
	tex.x = (tex.x + swapLine) % 1.0;
	float4 c0 = tex2D(s0, tex);
	return c0;
}

Сохраняем его в папку \Shaders медиаплеера (например, C:\Program Files\MPC-HC\Shaders) под именем Shift.hlsl. Далее заходим в настройки Media Player Classic (Options/Playback/Shaders) и добавляем новый шейдер Shift в список Active pre-Resize shaders.

Данный способ обработки видео не нагружает CPU, так как вся работа производится силами графической карты, во всяком случае, если она реальная, а не эмулированная.

Что это, Бэримор?


Это пиксельный шейдер, который должен выдать на выходе цвет точки в зависимости от координат, которые передаются через параметр tex. Переменная s0 содержит текстуру с текущим кадром видео.

Новая горизонтальная координата вычисляется как остаток деления по модулю 1 от суммы текущей координаты и сдвига swapLine. Таким образом мы сдвигаем точку вправо и переставляем её в левую часть, когда она выходит за габариты.

И наконец, команда tex2D(s0, tex) возвращает цвет точки с нужной координатой из исходного кадра.

P.S.


  • +31
  • 6,7k
  • 5
Поделиться публикацией

Комментарии 5

    +1
    Можно просто открыть в двух окнах одновременно с правильным обрезанием кадра :)
      +2

      Спасибо! Мне и в голову не приходило, что в MPC можно так легко взять и добавить свои шейдеры. Это же какой простор для велосипедостроения экспериментов с алгоритмами цветокоррекции/повышения резкости/убирания артефактов сжатия!

        0

        Черт, а я бы фильтр для DirectShow пошел писать) Спасибо

          0
          А мы в свое время когда надо было хитрый дисплейсмент делать встроились в отрисовку vlc плагином. Но вообще тема классная. Супер просто.
            +1
            А я просто написал свой плеер с шейдерами и юниформами. :) Но требования у меня были иными, в рамках MPC-HC эти требования не реализовать, например смена соотношения сторон видео с преобразованием Equiangular -> Fisheye и GLSL. Жаль что MPC-HC закрылся, не вижу преимуществ MPC-BE перед первым, оба в последнее время еле-еле развивались.

            Только полноправные пользователи могут оставлять комментарии. Войдите, пожалуйста.

            Самое читаемое