Нейросеть Google научилась писать музыку

Разработчики подразделения Google Research создали нейросеть MusicLM, способную генерировать музыку по текстовому описанию. Ее обучили на наборе данных из 280 тысяч часов записей. В результате алгоритмы смогли успешно комбинировать самые разные жанры и инструменты.

MusicLM способна выдавать композиции даже по абстрактным запросам. Например, в одном из примеров ее попросили создать «динамичный саундтрек для аркадной игры с запоминающимся риффом электрогитары», а в другом — мелодию, которая вызывает «ощущение, что ты затерялся в космосе». Заданием может быть и описание какой-нибудь знаменитой картины. А еще желаемый мотив можно напеть или просвистеть.

Все примеры работ нейросети доступны на сайте проекта. Вот один из них:

 

Сейчас у технологии есть несколько недостатков: некоторые композиции звучат странно, а вокал зачастую неразборчив. Кроме того, примерно 1% сгенерированной музыки повторяет мелодии из набора данных для обучения, что может повлечь иски, связанные с авторскими правами, поэтому в открытый доступ MusicLM компания пока выкладывать не готова.