Google создала нейросеть MusicLM, которая генерирует музыку любого жанра по текстовому описанию

a year ago

Компания Google разработала новую нейросеть под названием MusicLM. Но выпускать ее пока не собирается.

> 📝 Что это такое:

Это искусственный интеллект, который генерирует музыку по текстовому описанию, причем в любом жанре. Для этого MusicLM был обучен на наборе данных из 280 000 часов музыки.

Запросы могут быть разные: например, «очаровательная джазовая песня с запоминающимся саксофонным соло и сольный певец», «берлинское техно 90-х с низким басом и сильным ударом», «основной саундтрек к аркадной игре». Нейросеть даже может улавливать необходимое настроение и создавать музыку для определенного действия или состояния: для медитации или пробуждения.

Также MusicLM можно «заказать» определенный музыкальный инструмент и даже уровень подготовки «музыканта» — к примеру, «начинающий пианист» и «пианист-виртуоз».

Но ИИ далеко не идеален — видимо, поэтому Google пока не хочет делать его общедоступным и выкладывать исходный код. Некоторые образцы имеют искаженное качество, а голоса и «тексты» порой звучат очень плохо. Помимо этого, разработчики обнаружили, что около 1% музыки, сгенерированной системой, была напрямую воспроизведена из песен, на которых обучалась нейросеть. А это может вызвать проблемы с авторскими правами.

Послушать примеры музыки, сгенерированной MusicLM, можно на GitHub.

2 comments