Meta* представила AudioCraft — нейросеть для создания музыки и звуков. Подобные нейросети мы уже видели, но эта удивляет реалистичностью итоговых работ. Послушайте, что способна сгенерировать AudioCraft:
Для создания треков нейросеть использует сразу три ИИ-модели. AudioGen создает отдельные звуки, MusicGen генерирует мелодию, EnCodec убирает шумы и артефакты из звуковой дорожки.
У AudioCraft открытый исходный код — разработчики могут дополнять нейросеть, обучать ее и улучшать. AudioCraft способна создавать музыку не только по текстовому описанию. Можно вручную записать мелодию, «скормить» ИИ и попросить алгоритмы дополнить композицию. Также можно записывать звуки с микрофона и просить на их основе сделать шедевр.
Исходный код AudioCraft доступен на GitHub. Установить и пощупать новинку может кто угодно. Больше примеров с готовыми записями от нейросети опубликованы на сайте проекта.
Компания Meta* признана экстремистской организацией и запрещена в РФ.