Как стать автором
Обновить

Нейросеть «Яндекса» научилась генерировать видео в «Шедевруме»

Время на прочтение2 мин
Количество просмотров2.6K

«Яндекс» в тестовом режиме запустил технологию создания видео с помощью нейросети для пользователей. Такая возможность появилась в «Шедевруме»: в ответ на запросы приложение генерирует короткие ролики. Они могут стать основой для музыкальных клипов, анимации, динамических аватарок в соцсетях и т. п., рассказали Хабру в компании.

«Шедеврум» генерирует видео длиной четыре секунды с частотой 24 кадра в секунду. После публикации им можно поделиться с друзьями или сохранить в формате MP4. Сейчас функция работает в режиме тестирования. Генерация видео доступна активным пользователям «Шедеврума» в обновлённой версии приложения, а посмотреть результаты в ленте приложения могут все.

Чтобы сгенерировать видео в «Шедевруме», нужно описать текстом то, что хочется увидеть. В ответ приложение предложит четыре варианта первого кадра и набор анимационных эффектов для создания движения.

Нейросеть берёт за основу выбранное пользователем изображение, генерирует набор его изменённых версий и объединяет всё выбранным эффектом. Сейчас их семь: зум, таймлапс, полёт, панорама, вращение, подъём и морфинг.

Для создания кадров будущего видео используют метод каскадной диффузии. С помощью этой технологии «Шедеврум» генерирует отдельные изображения. Сначала нейросеть создаёт картинки в соответствии с запросом, а затем поэтапно увеличивает их разрешение, насыщая деталями.

Генерация видео дополняет другие возможности «Шедеврума»: создание изображений и текстовых постов с заголовком и иллюстрацией. Отправить запрос на коммерческое использование контента из «Шедеврума» можно через форму обратной связи — ответ придёт в течение пяти рабочих дней.

Теги:
Хабы:
Всего голосов 7: ↑6 и ↓1+8
Комментарии4

Другие новости

Истории

Работа

Data Scientist
63 вакансии

Ближайшие события

25 – 26 апреля
IT-конференция Merge Tatarstan 2025
Казань