Разработчики выпустили ToonCrafter — нейросеть для генерации анимационных видео

[DoomeR18G]

Помню такие возможности были у Adobe anime лет этак 12 назад.

[codik451]

То есть можно было с помощью текстового ввода получить мульт?

[DoomeR18G]

Не по тексту, а заполнение кадров между первым и последним. Просто смешно, что все это подают как прорыв, хотя на деле это вторяк, так ещё и не пашет нормально ни на одной машине.

[habrolog]

Кому и кобыла невеста.

Можно еще Macromedia Flash лет этак 25 назад вспомнить. Такие же возможности были, ну. Никакой разницы, вот совсем-совсем.

[iiiytn1k]

1) Пока что выложили код и веса только для интерполяции кадров

2) Код из оф. репозитория абсолютно не оптимизирован и с трудом ворочается на 4090, а после 1-2 генераций вываливается в CUDA OOM

3)Благо энтузиасты выпустили ноду для ComfyUI, которая позволяет запускать это поделие на карточках Nvidia с объемом VRAM от 16Гб и выше (upd: уже от 10Гб). А так же сконвертировали веса в safetensors fp16.

[sneg2015]

Не, знаю. Попробовал я это запускать, результат так себе. Нужно прям очень похожие кадры отправлять.