Meta представи AudioCraft – генератор на музика, базиран на изкуствен интелект

Meta представи AudioCraft – музикален генератор с изкуствен интелект с отворен код, който създава звук изцяло въз основа на текстови заявки на потребителя. AudioCraft съчетава 3 отделни модела с изкуствен интелект: MusicGen е предназначен за създаване на музика и е обучен на „20 000 часа музика, собственост на Meta или лицензирана специално за тази цел“, AudioGen генерира звуци и ефекти на околната среда, а EnCodec осигурява висококачествена обработка на звука.

Музиката, генерирана от AudioCraft прилича по-скоро на музак (леко пренебрежителен термин, прилаган към повечето форми на фонова музика, независимо от източника) или невзрачна атмосферна среда и не е предназначена да бъде следващият голям поп хит. Въпреки това Meta вярва, че AudioCraft може да постави началото на нова вълна в музикалната мода, точно както някога са направили първите синтезатори.

Meta признава трудността на създаването на модели с изкуствен интелект за генериране на музика, като говорител на компанията твърди, че задачата е с няколко порядъка по-трудна от генерирането на текст с изкуствен интелект като LLaMA 2. Компанията смята, че отвореният код на AudioCraft ще помогне за разнообразяване на данните, използвани за обучението му.

„Като споделяме кода за AudioCraft се надяваме да улесним други изследователи да тестват нови подходи за ограничаване или елиминиране на потенциални пристрастия и злоупотреби с генеративни модели.“

обясни говорител на Meta

Meta далеч не е пионер в областта на генерирането на аудио с помощта на изкуствен интелект. Големият езиков модел MusicLM на Google е доста успешен в генерирането на аудио, въпреки че е достъпен само за изследователи. Една генерирана от ИИ песен с гласови прилики между Drake и The Weeknd стана сензация. На свой ред звукозаписните компании и изпълнителите вече алармираха, тъй като много модели на ИИ могат да използват материали, защитени с авторски права за обучение.