Audiocraft - нейросеть, создающая музыку по текстовому описанию либо заданной мелодии

Новая нейросеть Audiocraft позволяет создавать любую музыку, дав лишь небольшое текстовое описание. Audiocraft использует генеративную модель WaveNet для синтеза звуковых волн на основе текстового или аудио описания. Вы можете просто отправить описание или музыкальный мотив, и нейросеть создаст для вас мелодию в любом стиле.

Нейронка достаточно требовательная к ресурсам видеокарты, разработчики рекомендуют минимум 16 гигабайт видеопамяти для нормальной работы (по факту, хватит 12). Но, для владельцев видеокарт послабее есть облегченная small модель, использующая примерно от 3 до 5.6 гигабайт видеопамяти.

Протестировать онлайн можно здесь и на Google Collab

Если же вы хотите запустить локально, то скачать audiocraft можно на официальной Github странице проекта, там же и есть инструкция по установке.

Либо же, можете воспользоваться моей portable версией, не требующей установки. Кроме этого, русифицирован интерфейс.

Audiocraft - нейросеть, создающая музыку по текстовому описанию либо заданной мелодии

Скачать её можно либо тут, либо с Яндекс Диска.

Больше различных релизов, связанных с нейросетями и их обновления можно найти у меня в Телеграм канале.

77
3 комментария

Прослушал роботворчество этой системы

4
Ответить

Либо я незнаю как правильно эффекты добавлять и инструменты но кажется что миксует она похуже платных аналогов таких же.

Ответить
Ответить