Комментарии 9
имхо: видео мельтешит раз в 10 быстрее чем музыкальный узор складывается, и повторяющиеся образы (изображения) быстро надоедают мозгу, хочется каждый раз новые видеть (примерно через каждые 3 секунды), без повторов
Не умаляя труда автора, мне вспоминается милкдроп (кажется) для винампа, который примерно то же (как визуальный результат) мог много-много лет назад. Нет, с авс не путаю))
Уже в первом абзаце ошибка. Такое ощущение, что вы в современные игрушки не играли, а там скорость генерации изображений будет повыше, чем 15fps. Вы видимо на какую-то конкретную нейросеть ориентировались и предполагаете, что она каждый кадр с нуля рисовать будет, а сейчас так уже не делают - долго, как вы уже заметили: намного проще и быстрее на каждом фрейме дообучать предыдущее изображение.
Спасибо автору за работу! В верном направлении движитесь!
Вы только что изобрели vj-инг :) но все равно ResPect!
Лет 13-15 назад я хотел первым в своём регионе заняться vj-ингом на коммерческой основе . Забегая вперёд - идея провалилась, но сейчас не об этом.
Вручную рулить видеорядом со сложной обработкой налёту возможно уже давно. Resolume существует если не 20, то 15 лет точно. А до неё были другие программы, уже не вспомню названия, без красивого графического интерфейса вообще - все на флоуграфах и скриптах, но Казантип в те времена ею оформлялся.
Так вот в то же время мне попалась в руки программа которая надеру генерала свой визуальный контент на основное подаваемого на аудиовыход сигнала и локальной папки с футажами и статических изображений. Органов управления почти не было, но результат впечатлял. Всё было красиво и в тему! Понятия нейросеть тогда ещё не было даже в задумках )) зато был сложный алгоритм частотного анализа, ну или что там ещё.... Название программы пытаюсь вспомнить...
Визуализация музыки с помощью нейросетей в реальном времени… В некотором смысле…