Что такое генеративная музыка

    Это — подкаст с теми, кто создает контент. Гость выпуска — Алексей Кочетков, CEO Mubert, с рассказом о генеративной музыке и своем видении будущего аудиоконтента.


    Алексей Кочетков, CEO Mubert



    alinatestova: Поскольку мы рассказываем не только про текстовый и разговорный контент, естественно, мы не обошли вниманием музыку. В особенности, достаточно новое направление в этой сфере. Алексей, ты — CEO проекта Mubert. Это — стриминговый сервис, который создаёт генеративную музыку. Расскажи, как он работает?



    Алексей: Генеративная музыка создаётся в реальном времени алгоритмами. Это — музыка, которая может быть адаптирована, применена в любой сфере, персонализирована и так далее. Она в реальном времени собирается из некоторого количества сэмплов.

    А сэмпл — это отрезок музыки, который каждый музыкант имеет возможность записать. То есть генеративная музыка создаётся из, как говорят по-английски, human-made samples [сэмплов, созданных человеком]. Алгоритм анализирует их и создает стрим только для тебя.



    Алина: Супер. Музыка создаётся алгоритмом, алгоритм — людьми.

    Имеет смысл поговорить немного про бэкграунд этого проекта, про его начало. Почему ты решил им заняться? Связано ли это было с твоими музыкальными интересами?




    Алексей: Как говорят, стартапы рождаются из боли. Я бегал, и у меня постоянно болело в боку от переключения музыки. В тот момент мне пришла в голову идея: почему бы не создать приложение, в котором сэмплы будут выстраиваться в бесконечную композицию, соответствующую темпу моего бега. Так родилась первая идея Mubert.

    Команду собрали в этот же день и начали создавать продукт, который впоследствии, конечно, совершил несколько пивотов. Но сама концепция — та же, что была создана в первый день.

    Это — музыка, которая не имеет начала, конца, пауз и междупесенных переходов.



    Алина: А твоё музыкальное прошлое как-то повлияло на твой выбор или определённые шаги, которые были сделаны в процессе разработки приложения?



    Алексей: Нет. У меня музыкальное джазовое образование, и здесь оно мало помогает. Я знаю ноты, знаю, как играть на контрабасе и из чего состоит музыка.

    Я всегда отвечал за бас. Во всех коллективах, в которых я присутствовал, всегда брал самые низкие частоты и играл на контрабасе, на бас-гитаре, на синтезаторах басовых. Это не помогает в работе над Mubert. Просто я примерно знаю, как устроена музыка, очень много её слушаю, и у меня давным-давно есть убеждение, что нет плохой музыки или плохого вкуса.

    Есть персональный вкус и персональный подход к музыке. У каждого человека он собственный, и каждый человек имеет право выбрать музыку и так показывать свой вкус.

    Мне помогает немного знание нот, гармоний и прочего. Но в целом над Mubert работает, помимо меня, ещё около пятидесяти музыкантов, которые активно участвуют в разработке интерфейса, систем ранжирования музыки и систем искусственного интеллекта. Это — люди, которые постоянно дают советы и влияют на то, как сегодня звучит Mubert.



    Алина: Можно ли сказать, что по сути генеративная — тот тип музыки, который максимально гармонично сочетается с другой деятельностью?

    Например, обычно писать текст или работать под музыку — удовольствие на любителя. Кто-то может привыкнуть, а кто-то — нет. Может ли алгоритмизированная музыка дать синергетический эффект, который, наоборот, позволит войти в состояние потока?




    Алексей: Это гипотеза, и мы её пытаемся проверить.

    Под генеративную музыку скоро будут читать — мы делаем совместное приложение с Bookmate. Под генеративную музыку люди бегают марафоны, и это единственное приложение, которое даёт возможность бежать и не менять своего темпа на протяжении четырёх, восьми, шестнадцати часов и так далее. Под эту музыку работают, учатся. Это, возможно, классный подход к музыке — быть спонсором твоего увлечения. Но это — гипотеза.

    Алина: И вы её проверяете коллаборациями?

    Алексей: Её подтверждают подписки и прослушивания, которые в Mubert происходят каждый день. Например, медитация — самый покупаемый у нас канал.

    Всего есть три платных канала: Meditate, Sleep и High. High — это даб, регги. Самый покупаемый — медитация, потому что в процессе медитации музыка не должна останавливаться или меняться. Mubert это исполняет.

    Алина: А High для каких состояний, если не буквально это воспринимать? (смеётся)

    Алексей: Отдыхать, расслабляться, чувствовать какую-то связь и так далее.



    Алина: Супер. Скажи, пожалуйста, на твой взгляд генеративная музыка — алгоритмическая, повторяющаяся, длительная — это что-то принципиально новое или какое-то продолжение этнической, шаманской и медитативной музыки?



    Алексей: Это что-то вроде репита.

    Mubert начинался в 2000 году на самом деле, когда я перезаписывал с радио Monte Carlo [трек] Bomfunk MC’s. Как только он звучал по радио, я продолжал запись на кассете, пока у меня не записывалась целая сторона с этим треком. Потом я сделал то же самое с другой стороной. В итоге у меня была целая кассета, на которой был записан только Bomfunk MC’s — Freestyler.

    Mubert возвращает к этим временам. Куча людей используют музыку на репите. Они включают какой-то трек и работают под него целый день или занимаются спортом какое-то время.

    Генеративная музыка в сегодняшнем её состоянии не до конца имеет всю ту драму, которую может дать диджей. Он в реальном времени понимает, что сейчас нужно поднять BPM, сейчас опустить, расширить гармонию или сузить. Генеративная музыка только стремится к этому.

    И мы — первопроходцы в создании драмы в генеративной музыке, которую мы научились создавать бесконечно долгой, плавной и понятной. Сейчас учимся создавать в ней драму.


    Как мы недавно показывали в магазине adidas. Мы создали диджей-сет без диджея, и куча людей прекрасно танцевала под эту музыку. Звучало это на уровне немецких диджеев, которые в принципе и были авторами сэмплов. Но именно сет создавал Mubert.

    Отвечая на вопрос, генеративная музыка берёт свои истоки от репита и закончит тем, что мы ещё себе представить не можем.



    Алина: Как устроена работа алгоритма?



    Алексей: Алгоритм анализирует множество параметров: мелодичность, ритмичность, насыщенность, «жирность» звука, инструмент. Его темп, тональность и так далее. Куча параметров, которые являются объективными. Далее начинаются субъективные параметры. Это — жанр, активность, твой вкус. Могут быть параметры, связанные с геоданными. Когда ты хочешь собрать, например, городской стрим — понять, как звучит город Берлин.

    Система ИИ здесь — сопроводитель к тому, чтобы субъективные параметры исполнялись. Для того, чтобы ты в момент какой-то своей деятельности получала музыку, которая основана на твоём вкусе и на тех вещах, которые ты до этого успела уже показать на этой системе.

    Скоро мы выпускаем приложение, в котором можно будет лайкать, дизлайкать, «фаворитить» музыку и влиять на собственный стиль. Это будет первое приложение в мире, в котором нет общего чарта. У нас нет даже в базе данных такого понятия как общий чарт популярности или непопулярности сэмплов и артистов. У каждого — свой чарт, в котором содержатся сочетания параметров. На их основе система учится и создаёт твой собственный саундтрек.

    Алина: По сути мы говорим о том, что для каждого пользователя Mubert появляется множество саундтреков к разным аспектам его жизни.

    Алексей: Да. Это первый настоящий персональный стриминг.



    Алина: Супер. Ты уже начал говорить про коллаборацию с adidas, а расскажи, пожалуйста, про коллаборации с брендами в целом. Как они выглядят?



    Алексей: Музыка — самый близкий к человеку вид творчества. Соответственно, если бренд хочет приблизиться к человеку, это нужно делать через музыку. Об этом пока немногие знают, но те бренды, которые знают, уже начинают это делать.

    Например, adidas проводит pop-up вечеринки, которые возникают внезапно в каких-то их магазинах. Они не афишируются. Другие бренды — спонсируют тематические вечеринки.

    К кому им двигаться, как не к новым технологиям? У них есть два варианта: они либо берут топового диджея, либо топовую технологию. Если есть возможность сочетать это — как мы сделали с adidas, когда у нас сэмплы предоставлял один из топовых продюсеров Берлина AtomTM — человек, который создавал электронику. Тогда и рождается самая яркая искра, которая сверкает для того, чтобы бренд мог о себе заявить.

    Для любого бренда музыка — это инфоповод.



    Алина: Если мы говорим про вечеринки… Там, естественно, людей много. Как Mubert понимает, какую музыку сделать? Как работает персонализация в этом случае?



    Алексей: Вечеринка кастомизируется под вечеринку, город — под город. Это всё…

    Алина: Сущность.

    Алексей: Да, сущность, под которую мы можем настраиваться. Персонализация идёт от твоего времени суток и дня до каких-то вещей глобальных. Как я уже объяснял: есть объективные параметры, есть субъективные. Совокупность субъективных параметров — это жанр, город, ты, утро. Что угодно. Объективные — насыщенность звука, его темп, тон, гамма и так далее. Все те вещи, которые можно измерить объективно.




    Алина: Как ты считаешь, как будет развиваться генеративная музыка и музыка в целом? Заменит ли в дальнейшем алгоритм человека-композитора или диджея?



    Алексей: Ни в коем случае. Диджей-селектор останется. Круче, чем диджей, нельзя собрать музыку — будь то музыка трековая или сэмпловая. Раньше диджеев называли селекторами, и эта работа останется, потому что они собирают самый «жир».

    Развитие генеративной музыки приведёт к тому, что она появится в каждом телефоне, потому что даёт немного другие возможности для адаптации и персонализации этой музыки. В ней так же будут присутствовать авторские подборки. Мы, например, сможем обмениваться какими-то генерациями и понимать, каким образом ты обучила свой Mubert, а каким — я свой. Это примерно как сегодня с плейлистами, только на более глубоком уровне.

    Алина: Получается, что будущее генеративной музыки — симбиоз человека-творца и алгоритма, который анализирует всё происходящее более глубоко и точно?

    Алексей: Абсолютно.



    Алина: Супер. И напоследок — наш блиц из двух вопросов. Музыка помогает…



    Алексей: Жить, дышать.

    Алина: Лучший трек — это тот,…

    Алексей: Который «вставляет».

    Алина: Класс, спасибо большое.



    Наш микроформат по теме контент-маркетинга:

    Что у вас вообще за контора такая?
    Not my job: «не моя работа» в редакторском деле
    Почему опыт работы — это не всегда «кем вы работали раньше»
    Стамина — качество, без которого не обойтись
    Когда восьми часов… хватает

    Архетипы: почему работают истории
    ​Writer’s block: аутсорсить контент — это нечестно!

    P.S. В профиле glphmedia — ссылки на все выпуски нашего подкаста.
    • +15
    • 4,5k
    • 7
    VSCE
    93,59
    Любим записывать подкасты и исследовать коворкинги
    Поделиться публикацией

    Комментарии 7

      0
      Имхо, музыку, прежде всего, «интересно» слушать, а уже потом узнавать, как она «сочинялась».

      К сожалению, даже за «3 клика» свое любопытство удовлетворить не смог.
        0
        Не знаю, у меня с загрузкой из аппстора нет проблем. Знал о Mubert еще до интервью с основателем, слушал его, видел отзывы на Reddit и много где еще (кстати, кажется, интервью для этого и нужны, чтобы чуть больше узнать о том, «как это устроено»).
        –2
        Зачем придумывать новые слова и названия? Это же просто музыка сгенерированная AI или неким AI помощником. Половина статьи ходит вокруг да около этого. В то время как слово «генеративный» просто вводит в заблуждение, поскольку к понятию синтеза и генерации имеет весьма побочное отношение, если не сказать больше вообще ни какого, а на нем все завязано как на основополагающим термине. С таким же успехом эту музыку можно было назвать «музыкой грибковых побегов».

        В результате статья, для людей занимающихся синтезом генерацией и моделированием, выглядит как реклама набора ножей. С начало думаешь вот вот расскажут что то интересное, а потом нет, во купите ножи.
          0
          Есть такой термин «generative art», обычно он относится к генеративной графике, но суть та же — создание эстетически интересных произведений с помощью алгоритмов (визуальное генеративное искусство обычно создают в Processing или p5.js, но в последние годы тоже очень часто подключают AI/DL, хотя это ответвление иногда называют отдельным термином neural art). Так что, IMHO, использование термина в статье вполне легитимно.

          Хотя название немного вводит в заблуждение, т.к. есть куча проектов с генеративной музыкой, которые вообще не задействуют AI, а здесь описание одного конкретного проекта. С вопроса «Можно ли сказать, что по сути генеративная — тот тип музыки, который максимально гармонично сочетается с другой деятельностью?» и ответа на него я посмеялся, т.к. до этого, в основном, сталкивался с генеративной музыкой для разных аудиовизуальных перформансов, где очень полуплярен всякий нойз, глитч и вообще всё, что сильно режет уши и плохо сочетается с любой деятельностью.
            0
            «generative art»
            То есть это все таки перевод, но не русское слово «генеративный», которое скажем в сочетании со словом «орган» или «инструмент» по факту является половым органом свисающим между ног. Но это явно не генерирующий орган — в таком виде это можно воспринимать не более чем сленг.

            Даже из вашего объяснения видно что это не прямой синоним генерации, а отдельное направление, но не из статьи.
              0
              в русском термин «генеративное искусство» тоже уже устоялся, судя по количеству страниц в результатах поиска
              Вот, кажется, самое раннее упоминание — сентябрь 2007
                0
                Да, но все это порождение 21 века. Как и литература на которой основывается понятие Генеративный дизайн. Я к сожалению являюсь продуктом 20 века и для меня это все весьма странно звучит. К тому же вся литература, опять же, не является русской. И как в той же википедии показано, что это все таки «порождающий дизайн».

                Вот, кажется, самое раннее упоминание — сентябрь 2007

                Это генератор! Покажите мне там прилагательное «генеративное». А упоминание генераторов я вам могу привести и из 80 годов и ранее, ни каких генеративных устройств нет.

        Только полноправные пользователи могут оставлять комментарии. Войдите, пожалуйста.

        Самое читаемое