Нейросеть «Яндекса» стала соавтором пьесы для альта с оркестром
В последнем сезоне «Симпсонов» главный герой узнал: чтобы очаровать гиков, надо запустить песенку, которую сочинила нейросеть. Все будут заворожённо слушать и подтанцовывать. Компания «Яндекс» почти воплотила в жизнь эту идею.
Композитор Кузьма Бодров рассказал, что свою последнюю работу — Сочинение для альта с оркестром — написал не один, а в соавторстве с нейросетью «Яндекса». Специально обученная на классической музыке нейросеть сгенерировала музыкальный ряд, на основе которого Кузьма смог написать мелодию и развить её в целую пьесу. Музыкальная премьера опуса состоится на гала-концерте закрытия XII Зимнего международного фестиваля искусств в Сочи.
«Идея была совместной — Юрия Башмета и Дмитрия Гринченко, — говорит композитор. — Я получил около двадцати с чем-то файлов от нейросети Яндекс. Это были мелодические линии, изложенные на фортепиано. Как ни странно, в них были интересные зёрна, за которые цепляется слух. Но они были не оформлены. Это шло единым бессмысленным потоком, как бывает речь у нездоровых людей. Хотя возникали иногда ритмические образования в этом потоке. Я взял оттуда несколько таких тем и немножко отшлифовал их. Затем продолжил более осознанное выстраивание формы, сделал оркестровку и вывел партию солирующего альта. Получилось такое произведение».
Нельзя ожидать, что нейросеть будет надёжно выдавать музыкальные шедевры. Однако она способна генерировать бесконечное количество музыкального материала, в котором попадаются интересные фрагменты. Это может помочь авторам, которые ищут идею: «Композиторы, когда начинают сочинять, обычно сталкиваются с проблемой: за что зацепиться, за какую ниточку дёрнуть, чтобы найти мелодический оборот, либо аккорд, либо тембр, — объясняет Кузьма Бодров. — И это найденное начинает, как бы, обрастать. В этом поиске всегда состоит трудность. А в этом случае было легче. Эти зёрна уже были заданы. Я получил кирпичики, из которых начал строить здание. Это можно назвать соавторством, потому что мелодические линии были предложены не мной, а нейронной сетью».
Кузьма Бодров шутит, что авторское вознаграждение действительно нужно выплачивать обоим авторам, потому что это полноценное соавторство.
Автор рассказал, что по продолжительности произведение идёт 7-8 минут. Автор оттолкнулся от английского жанра «граунд», где мелодия повторяется, а всё вокруг меняется. При этом он решил выбрать быстрый темп, который ему предложила нейросеть «Яндекса». Предложенную мелодию он отдал солирующему фортепиано, начал закольцовывать много раз и вокруг выстраивать вариации.
Название для произведения пока не придумали. Пьесу ещё послушают редакторы «Яндекса» и могут предложить какие-то толковые идеи.
Это уже не первая музыкальная работа нейросети «Яндекса». В 2016 году она помогла сочинить альбом «Нейронная оборона», выполненный в стилистике Егора Летова и группы «Гражданская оборона». Правда, там работа Искусственного интеллекта ограничилась сочинением стихов.
«Нейропоэт» у «Яндекса» работает достаточно давно. В 2017 году он сочинил стихи в стиле Курта Кобейна, солиста «Нирваны». Тем музыкальным проектом руководили Алексей Тихонов и Иван Ямщиков, сотрудник Института научной математики Общества Макса Планка в Лейпциге. Одновременно авторы опубликовали препринт научной работы о генерации музыки нейросетью.
Скорее всего, на этой же научной работе основан и новый проект автоматической генерации музыки. Статья Music Generation with Variational Recurrent Autoencoder Supported by History несколько раз обновлялась, а последняя версия датирована 12 ноября 2018 года. То есть видно, что авторы продолжают работу над проектом.
Схема вариационного рекуррентного автокодировщика с поддержкой истории (Variational Recurrent Autoencoder Supported by History, VRASH) для генерации музыки. По щелчку открывается увеличенное изображение
«Яндекс» будет транслировать концерт, на котором исполнят Сочинение для альта с оркестром, написанное в соавторстве с нейросетью. Трансляция пройдёт 24 февраля в 19:00 (по московскому времени). Трансляцию также можно запустить на сайте телеканала «Культура».