Это — подкаст с теми, кто создает контент. Гость выпуска — Алексей Кочетков, CEO Mubert, с рассказом о генеративной музыке и своем видении будущего аудиоконтента.
Алексей Кочетков, CEO Mubert
alinatestova: Поскольку мы рассказываем не только про текстовый и разговорный контент, естественно, мы не обошли вниманием музыку. В особенности, достаточно новое направление в этой сфере. Алексей, ты — CEO проекта Mubert. Это — стриминговый сервис, который создаёт генеративную музыку. Расскажи, как он работает?
Алексей: Генеративная музыка создаётся в реальном времени алгоритмами. Это — музыка, которая может быть адаптирована, применена в любой сфере, персонализирована и так далее. Она в реальном времени собирается из некоторого количества сэмплов.
А сэмпл — это отрезок музыки, который каждый музыкант имеет возможность записать. То есть генеративная музыка создаётся из, как говорят по-английски, human-made samples [сэмплов, созданных человеком]. Алгоритм анализирует их и создает стрим только для тебя.
Алина: Супер. Музыка создаётся алгоритмом, алгоритм — людьми.
Имеет смысл поговорить немного про бэкграунд этого проекта, про его начало. Почему ты решил им заняться? Связано ли это было с твоими музыкальными интересами?
Алексей: Как говорят, стартапы рождаются из боли. Я бегал, и у меня постоянно болело в боку от переключения музыки. В тот момент мне пришла в голову идея: почему бы не создать приложение, в котором сэмплы будут выстраиваться в бесконечную композицию, соответствующую темпу моего бега. Так родилась первая идея Mubert.
Команду собрали в этот же день и начали создавать продукт, который впоследствии, конечно, совершил несколько пивотов. Но сама концепция — та же, что была создана в первый день.
Алина: А твоё музыкальное прошлое как-то повлияло на твой выбор или определённые шаги, которые были сделаны в процессе разработки приложения?
Алексей: Нет. У меня музыкальное джазовое образование, и здесь оно мало помогает. Я знаю ноты, знаю, как играть на контрабасе и из чего состоит музыка.
Я всегда отвечал за бас. Во всех коллективах, в которых я присутствовал, всегда брал самые низкие частоты и играл на контрабасе, на бас-гитаре, на синтезаторах басовых. Это не помогает в работе над Mubert. Просто я примерно знаю, как устроена музыка, очень много её слушаю, и у меня давным-давно есть убеждение, что нет плохой музыки или плохого вкуса.
Есть персональный вкус и персональный подход к музыке. У каждого человека он собственный, и каждый человек имеет право выбрать музыку и так показывать свой вкус.
Мне помогает немного знание нот, гармоний и прочего. Но в целом над Mubert работает, помимо меня, ещё около пятидесяти музыкантов, которые активно участвуют в разработке интерфейса, систем ранжирования музыки и систем искусственного интеллекта. Это — люди, которые постоянно дают советы и влияют на то, как сегодня звучит Mubert.
Алина: Можно ли сказать, что по сути генеративная — тот тип музыки, который максимально гармонично сочетается с другой деятельностью?
Например, обычно писать текст или работать под музыку — удовольствие на любителя. Кто-то может привыкнуть, а кто-то — нет. Может ли алгоритмизированная музыка дать синергетический эффект, который, наоборот, позволит войти в состояние потока?
Алексей: Это гипотеза, и мы её пытаемся проверить.
Под генеративную музыку скоро будут читать — мы делаем совместное приложение с Bookmate. Под генеративную музыку люди бегают марафоны, и это единственное приложение, которое даёт возможность бежать и не менять своего темпа на протяжении четырёх, восьми, шестнадцати часов и так далее. Под эту музыку работают, учатся. Это, возможно, классный подход к музыке — быть спонсором твоего увлечения. Но это — гипотеза.
Алина: И вы её проверяете коллаборациями?
Алексей: Её подтверждают подписки и прослушивания, которые в Mubert происходят каждый день. Например, медитация — самый покупаемый у нас канал.
Алина: А High для каких состояний, если не буквально это воспринимать? (смеётся)
Алексей: Отдыхать, расслабляться, чувствовать какую-то связь и так далее.
Алина: Супер. Скажи, пожалуйста, на твой взгляд генеративная музыка — алгоритмическая, повторяющаяся, длительная — это что-то принципиально новое или какое-то продолжение этнической, шаманской и медитативной музыки?
Алексей: Это что-то вроде репита.
Mubert начинался в 2000 году на самом деле, когда я перезаписывал с радио Monte Carlo [трек] Bomfunk MC’s. Как только он звучал по радио, я продолжал запись на кассете, пока у меня не записывалась целая сторона с этим треком. Потом я сделал то же самое с другой стороной. В итоге у меня была целая кассета, на которой был записан только Bomfunk MC’s — Freestyler.
Mubert возвращает к этим временам. Куча людей используют музыку на репите. Они включают какой-то трек и работают под него целый день или занимаются спортом какое-то время.
Генеративная музыка в сегодняшнем её состоянии не до конца имеет всю ту драму, которую может дать диджей. Он в реальном времени понимает, что сейчас нужно поднять BPM, сейчас опустить, расширить гармонию или сузить. Генеративная музыка только стремится к этому.
И мы — первопроходцы в создании драмы в генеративной музыке, которую мы научились создавать бесконечно долгой, плавной и понятной. Сейчас учимся создавать в ней драму.
Как мы недавно показывали в магазине adidas. Мы создали диджей-сет без диджея, и куча людей прекрасно танцевала под эту музыку. Звучало это на уровне немецких диджеев, которые в принципе и были авторами сэмплов. Но именно сет создавал Mubert.
Алина: Как устроена работа алгоритма?
Алексей: Алгоритм анализирует множество параметров: мелодичность, ритмичность, насыщенность, «жирность» звука, инструмент. Его темп, тональность и так далее. Куча параметров, которые являются объективными. Далее начинаются субъективные параметры. Это — жанр, активность, твой вкус. Могут быть параметры, связанные с геоданными. Когда ты хочешь собрать, например, городской стрим — понять, как звучит город Берлин.
Система ИИ здесь — сопроводитель к тому, чтобы субъективные параметры исполнялись. Для того, чтобы ты в момент какой-то своей деятельности получала музыку, которая основана на твоём вкусе и на тех вещах, которые ты до этого успела уже показать на этой системе.
Скоро мы выпускаем приложение, в котором можно будет лайкать, дизлайкать, «фаворитить» музыку и влиять на собственный стиль. Это будет первое приложение в мире, в котором нет общего чарта. У нас нет даже в базе данных такого понятия как общий чарт популярности или непопулярности сэмплов и артистов. У каждого — свой чарт, в котором содержатся сочетания параметров. На их основе система учится и создаёт твой собственный саундтрек.
Алина: По сути мы говорим о том, что для каждого пользователя Mubert появляется множество саундтреков к разным аспектам его жизни.
Алексей: Да. Это первый настоящий персональный стриминг.
Алина: Супер. Ты уже начал говорить про коллаборацию с adidas, а расскажи, пожалуйста, про коллаборации с брендами в целом. Как они выглядят?
Алексей: Музыка — самый близкий к человеку вид творчества. Соответственно, если бренд хочет приблизиться к человеку, это нужно делать через музыку. Об этом пока немногие знают, но те бренды, которые знают, уже начинают это делать.
Например, adidas проводит pop-up вечеринки, которые возникают внезапно в каких-то их магазинах. Они не афишируются. Другие бренды — спонсируют тематические вечеринки.
К кому им двигаться, как не к новым технологиям? У них есть два варианта: они либо берут топового диджея, либо топовую технологию. Если есть возможность сочетать это — как мы сделали с adidas, когда у нас сэмплы предоставлял один из топовых продюсеров Берлина AtomTM — человек, который создавал электронику. Тогда и рождается самая яркая искра, которая сверкает для того, чтобы бренд мог о себе заявить.
Алина: Если мы говорим про вечеринки… Там, естественно, людей много. Как Mubert понимает, какую музыку сделать? Как работает персонализация в этом случае?
Алексей: Вечеринка кастомизируется под вечеринку, город — под город. Это всё…
Алина: Сущность.
Алексей: Да, сущность, под которую мы можем настраиваться. Персонализация идёт от твоего времени суток и дня до каких-то вещей глобальных. Как я уже объяснял: есть объективные параметры, есть субъективные. Совокупность субъективных параметров — это жанр, город, ты, утро. Что угодно. Объективные — насыщенность звука, его темп, тон, гамма и так далее. Все те вещи, которые можно измерить объективно.
Алина: Как ты считаешь, как будет развиваться генеративная музыка и музыка в целом? Заменит ли в дальнейшем алгоритм человека-композитора или диджея?
Алексей: Ни в коем случае. Диджей-селектор останется. Круче, чем диджей, нельзя собрать музыку — будь то музыка трековая или сэмпловая. Раньше диджеев называли селекторами, и эта работа останется, потому что они собирают самый «жир».
Развитие генеративной музыки приведёт к тому, что она появится в каждом телефоне, потому что даёт немного другие возможности для адаптации и персонализации этой музыки. В ней так же будут присутствовать авторские подборки. Мы, например, сможем обмениваться какими-то генерациями и понимать, каким образом ты обучила свой Mubert, а каким — я свой. Это примерно как сегодня с плейлистами, только на более глубоком уровне.
Алина: Получается, что будущее генеративной музыки — симбиоз человека-творца и алгоритма, который анализирует всё происходящее более глубоко и точно?
Алексей: Абсолютно.
Алина: Супер. И напоследок — наш блиц из двух вопросов. Музыка помогает…
Алексей: Жить, дышать.
Алина: Лучший трек — это тот,…
Алексей: Который «вставляет».
Алина: Класс, спасибо большое.
- прослушать в Telegram или в веб-плеере
- подписаться на подкаст в iTunes или на Хабре
Алексей Кочетков, CEO Mubertalinatestova: Поскольку мы рассказываем не только про текстовый и разговорный контент, естественно, мы не обошли вниманием музыку. В особенности, достаточно новое направление в этой сфере. Алексей, ты — CEO проекта Mubert. Это — стриминговый сервис, который создаёт генеративную музыку. Расскажи, как он работает?
Алексей: Генеративная музыка создаётся в реальном времени алгоритмами. Это — музыка, которая может быть адаптирована, применена в любой сфере, персонализирована и так далее. Она в реальном времени собирается из некоторого количества сэмплов.
А сэмпл — это отрезок музыки, который каждый музыкант имеет возможность записать. То есть генеративная музыка создаётся из, как говорят по-английски, human-made samples [сэмплов, созданных человеком]. Алгоритм анализирует их и создает стрим только для тебя.
Алина: Супер. Музыка создаётся алгоритмом, алгоритм — людьми.
Имеет смысл поговорить немного про бэкграунд этого проекта, про его начало. Почему ты решил им заняться? Связано ли это было с твоими музыкальными интересами?
Алексей: Как говорят, стартапы рождаются из боли. Я бегал, и у меня постоянно болело в боку от переключения музыки. В тот момент мне пришла в голову идея: почему бы не создать приложение, в котором сэмплы будут выстраиваться в бесконечную композицию, соответствующую темпу моего бега. Так родилась первая идея Mubert.
Команду собрали в этот же день и начали создавать продукт, который впоследствии, конечно, совершил несколько пивотов. Но сама концепция — та же, что была создана в первый день.
Это — музыка, которая не имеет начала, конца, пауз и междупесенных переходов.
Алина: А твоё музыкальное прошлое как-то повлияло на твой выбор или определённые шаги, которые были сделаны в процессе разработки приложения?
Алексей: Нет. У меня музыкальное джазовое образование, и здесь оно мало помогает. Я знаю ноты, знаю, как играть на контрабасе и из чего состоит музыка.
Я всегда отвечал за бас. Во всех коллективах, в которых я присутствовал, всегда брал самые низкие частоты и играл на контрабасе, на бас-гитаре, на синтезаторах басовых. Это не помогает в работе над Mubert. Просто я примерно знаю, как устроена музыка, очень много её слушаю, и у меня давным-давно есть убеждение, что нет плохой музыки или плохого вкуса.
Есть персональный вкус и персональный подход к музыке. У каждого человека он собственный, и каждый человек имеет право выбрать музыку и так показывать свой вкус.
Мне помогает немного знание нот, гармоний и прочего. Но в целом над Mubert работает, помимо меня, ещё около пятидесяти музыкантов, которые активно участвуют в разработке интерфейса, систем ранжирования музыки и систем искусственного интеллекта. Это — люди, которые постоянно дают советы и влияют на то, как сегодня звучит Mubert.
Алина: Можно ли сказать, что по сути генеративная — тот тип музыки, который максимально гармонично сочетается с другой деятельностью?
Например, обычно писать текст или работать под музыку — удовольствие на любителя. Кто-то может привыкнуть, а кто-то — нет. Может ли алгоритмизированная музыка дать синергетический эффект, который, наоборот, позволит войти в состояние потока?
Алексей: Это гипотеза, и мы её пытаемся проверить.
Под генеративную музыку скоро будут читать — мы делаем совместное приложение с Bookmate. Под генеративную музыку люди бегают марафоны, и это единственное приложение, которое даёт возможность бежать и не менять своего темпа на протяжении четырёх, восьми, шестнадцати часов и так далее. Под эту музыку работают, учатся. Это, возможно, классный подход к музыке — быть спонсором твоего увлечения. Но это — гипотеза.
Алина: И вы её проверяете коллаборациями?
Алексей: Её подтверждают подписки и прослушивания, которые в Mubert происходят каждый день. Например, медитация — самый покупаемый у нас канал.
Всего есть три платных канала: Meditate, Sleep и High. High — это даб, регги. Самый покупаемый — медитация, потому что в процессе медитации музыка не должна останавливаться или меняться. Mubert это исполняет.
Алина: А High для каких состояний, если не буквально это воспринимать? (смеётся)
Алексей: Отдыхать, расслабляться, чувствовать какую-то связь и так далее.
Алина: Супер. Скажи, пожалуйста, на твой взгляд генеративная музыка — алгоритмическая, повторяющаяся, длительная — это что-то принципиально новое или какое-то продолжение этнической, шаманской и медитативной музыки?
Алексей: Это что-то вроде репита.
Mubert начинался в 2000 году на самом деле, когда я перезаписывал с радио Monte Carlo [трек] Bomfunk MC’s. Как только он звучал по радио, я продолжал запись на кассете, пока у меня не записывалась целая сторона с этим треком. Потом я сделал то же самое с другой стороной. В итоге у меня была целая кассета, на которой был записан только Bomfunk MC’s — Freestyler.
Mubert возвращает к этим временам. Куча людей используют музыку на репите. Они включают какой-то трек и работают под него целый день или занимаются спортом какое-то время.
Генеративная музыка в сегодняшнем её состоянии не до конца имеет всю ту драму, которую может дать диджей. Он в реальном времени понимает, что сейчас нужно поднять BPM, сейчас опустить, расширить гармонию или сузить. Генеративная музыка только стремится к этому.
И мы — первопроходцы в создании драмы в генеративной музыке, которую мы научились создавать бесконечно долгой, плавной и понятной. Сейчас учимся создавать в ней драму.
Как мы недавно показывали в магазине adidas. Мы создали диджей-сет без диджея, и куча людей прекрасно танцевала под эту музыку. Звучало это на уровне немецких диджеев, которые в принципе и были авторами сэмплов. Но именно сет создавал Mubert.
Отвечая на вопрос, генеративная музыка берёт свои истоки от репита и закончит тем, что мы ещё себе представить не можем.
Алина: Как устроена работа алгоритма?
Алексей: Алгоритм анализирует множество параметров: мелодичность, ритмичность, насыщенность, «жирность» звука, инструмент. Его темп, тональность и так далее. Куча параметров, которые являются объективными. Далее начинаются субъективные параметры. Это — жанр, активность, твой вкус. Могут быть параметры, связанные с геоданными. Когда ты хочешь собрать, например, городской стрим — понять, как звучит город Берлин.
Система ИИ здесь — сопроводитель к тому, чтобы субъективные параметры исполнялись. Для того, чтобы ты в момент какой-то своей деятельности получала музыку, которая основана на твоём вкусе и на тех вещах, которые ты до этого успела уже показать на этой системе.
Скоро мы выпускаем приложение, в котором можно будет лайкать, дизлайкать, «фаворитить» музыку и влиять на собственный стиль. Это будет первое приложение в мире, в котором нет общего чарта. У нас нет даже в базе данных такого понятия как общий чарт популярности или непопулярности сэмплов и артистов. У каждого — свой чарт, в котором содержатся сочетания параметров. На их основе система учится и создаёт твой собственный саундтрек.
Алина: По сути мы говорим о том, что для каждого пользователя Mubert появляется множество саундтреков к разным аспектам его жизни.
Алексей: Да. Это первый настоящий персональный стриминг.
Алина: Супер. Ты уже начал говорить про коллаборацию с adidas, а расскажи, пожалуйста, про коллаборации с брендами в целом. Как они выглядят?
Алексей: Музыка — самый близкий к человеку вид творчества. Соответственно, если бренд хочет приблизиться к человеку, это нужно делать через музыку. Об этом пока немногие знают, но те бренды, которые знают, уже начинают это делать.
Например, adidas проводит pop-up вечеринки, которые возникают внезапно в каких-то их магазинах. Они не афишируются. Другие бренды — спонсируют тематические вечеринки.
К кому им двигаться, как не к новым технологиям? У них есть два варианта: они либо берут топового диджея, либо топовую технологию. Если есть возможность сочетать это — как мы сделали с adidas, когда у нас сэмплы предоставлял один из топовых продюсеров Берлина AtomTM — человек, который создавал электронику. Тогда и рождается самая яркая искра, которая сверкает для того, чтобы бренд мог о себе заявить.
Для любого бренда музыка — это инфоповод.
Алина: Если мы говорим про вечеринки… Там, естественно, людей много. Как Mubert понимает, какую музыку сделать? Как работает персонализация в этом случае?
Алексей: Вечеринка кастомизируется под вечеринку, город — под город. Это всё…
Алина: Сущность.
Алексей: Да, сущность, под которую мы можем настраиваться. Персонализация идёт от твоего времени суток и дня до каких-то вещей глобальных. Как я уже объяснял: есть объективные параметры, есть субъективные. Совокупность субъективных параметров — это жанр, город, ты, утро. Что угодно. Объективные — насыщенность звука, его темп, тон, гамма и так далее. Все те вещи, которые можно измерить объективно.
Алина: Как ты считаешь, как будет развиваться генеративная музыка и музыка в целом? Заменит ли в дальнейшем алгоритм человека-композитора или диджея?
Алексей: Ни в коем случае. Диджей-селектор останется. Круче, чем диджей, нельзя собрать музыку — будь то музыка трековая или сэмпловая. Раньше диджеев называли селекторами, и эта работа останется, потому что они собирают самый «жир».
Развитие генеративной музыки приведёт к тому, что она появится в каждом телефоне, потому что даёт немного другие возможности для адаптации и персонализации этой музыки. В ней так же будут присутствовать авторские подборки. Мы, например, сможем обмениваться какими-то генерациями и понимать, каким образом ты обучила свой Mubert, а каким — я свой. Это примерно как сегодня с плейлистами, только на более глубоком уровне.
Алина: Получается, что будущее генеративной музыки — симбиоз человека-творца и алгоритма, который анализирует всё происходящее более глубоко и точно?
Алексей: Абсолютно.
Алина: Супер. И напоследок — наш блиц из двух вопросов. Музыка помогает…
Алексей: Жить, дышать.
Алина: Лучший трек — это тот,…
Алексей: Который «вставляет».
Алина: Класс, спасибо большое.
Наш микроформат по теме контент-маркетинга:
Что у вас вообще за контора такая?
Архетипы: почему работают истории
P.S. В профиле glphmedia — ссылки на все выпуски нашего подкаста.
Комментарии (7)
panteleymonov
24.03.2019 10:13-1Зачем придумывать новые слова и названия? Это же просто музыка сгенерированная AI или неким AI помощником. Половина статьи ходит вокруг да около этого. В то время как слово «генеративный» просто вводит в заблуждение, поскольку к понятию синтеза и генерации имеет весьма побочное отношение, если не сказать больше вообще ни какого, а на нем все завязано как на основополагающим термине. С таким же успехом эту музыку можно было назвать «музыкой грибковых побегов».
В результате статья, для людей занимающихся синтезом генерацией и моделированием, выглядит как реклама набора ножей. С начало думаешь вот вот расскажут что то интересное, а потом нет, во купите ножи.
exsstas
24.03.2019 11:21Есть такой термин «generative art», обычно он относится к генеративной графике, но суть та же — создание эстетически интересных произведений с помощью алгоритмов (визуальное генеративное искусство обычно создают в Processing или p5.js, но в последние годы тоже очень часто подключают AI/DL, хотя это ответвление иногда называют отдельным термином neural art). Так что, IMHO, использование термина в статье вполне легитимно.
Хотя название немного вводит в заблуждение, т.к. есть куча проектов с генеративной музыкой, которые вообще не задействуют AI, а здесь описание одного конкретного проекта. С вопроса «Можно ли сказать, что по сути генеративная — тот тип музыки, который максимально гармонично сочетается с другой деятельностью?» и ответа на него я посмеялся, т.к. до этого, в основном, сталкивался с генеративной музыкой для разных аудиовизуальных перформансов, где очень полуплярен всякий нойз, глитч и вообще всё, что сильно режет уши и плохо сочетается с любой деятельностью.panteleymonov
24.03.2019 11:41«generative art»
То есть это все таки перевод, но не русское слово «генеративный», которое скажем в сочетании со словом «орган» или «инструмент» по факту является половым органом свисающим между ног. Но это явно не генерирующий орган — в таком виде это можно воспринимать не более чем сленг.
Даже из вашего объяснения видно что это не прямой синоним генерации, а отдельное направление, но не из статьи.exsstas
24.03.2019 11:52в русском термин «генеративное искусство» тоже уже устоялся, судя по количеству страниц в результатах поиска
Вот, кажется, самое раннее упоминание — сентябрь 2007panteleymonov
24.03.2019 11:54Да, но все это порождение 21 века. Как и литература на которой основывается понятие Генеративный дизайн. Я к сожалению являюсь продуктом 20 века и для меня это все весьма странно звучит. К тому же вся литература, опять же, не является русской. И как в той же википедии показано, что это все таки «порождающий дизайн».
Вот, кажется, самое раннее упоминание — сентябрь 2007
Это генератор! Покажите мне там прилагательное «генеративное». А упоминание генераторов я вам могу привести и из 80 годов и ранее, ни каких генеративных устройств нет.
orion76
Имхо, музыку, прежде всего, «интересно» слушать, а уже потом узнавать, как она «сочинялась».
К сожалению, даже за «3 клика» свое любопытство удовлетворить не смог.
dmitrykabanov
Не знаю, у меня с загрузкой из аппстора нет проблем. Знал о Mubert еще до интервью с основателем, слушал его, видел отзывы на Reddit и много где еще (кстати, кажется, интервью для этого и нужны, чтобы чуть больше узнать о том, «как это устроено»).