Мета Опен-соурце Генеративни АИ алат МусицГен који може да креира музику из текстуалних упита – ТецхЦулт

Мета, реномирана технолошка компанија која стоји иза разних револуционарних иновација, недавно је представила своје најновије достигнуће у области вештачке интелигенције јер је отвореног кода МусицГен да креирате музику из текстуалних упита. Овај музички генератор отвореног кода који покреће вештачку интелигенцију има изузетну способност да креира јединствене композиције засноване на текстуалним упитима.

Како функционише МусицГен

МусицГен ради користећи најсавременију технологију АИ модел обучени на обимном скупу података лиценциране музике. Процес обуке је укључивао анализу огромне колекције 20.000 сати висококвалитетних музичких нумера, укључујући Мета интерни скуп података, као и нумере које потичу из Схуттерстоцк и Понд5. Овај разнолик корпус музичких стилова и жанрова омогућава МусицГен-у да понуди широк спектар креативних могућности.

Да би оптимизовала перформансе, Мета је користила њихове 32Кхз ЕнЦодец аудио токенизер, који разлаже музику на мање делове. Ово омогућава паралелну обраду, што резултира бржим и ефикаснијим генерисањем музике. Корисници могу уносити различите текстуална упутства, као што је одређени жанр или мелодија, да усмере МусицГен у производњи композиције која је у складу са њиховим жељеним музичким правцем.

Штавише, МусицГен омогућава корисницима да обезбедите референтну аудио датотеку, који служи као нацрт за генерисање нове музике. Усклађивањем генерисане композиције са референтном нумером, МусицГен нуди јединствену прилику за стварање хармоничних комада који резонују са устаљеним мелодијама или песмама.

Које су карактеристике МусицГен-а

• Генерисање музике на основу текстуалних упита: МусицГен користи моћ вештачке интелигенције за креирање оригиналних музичких композиција на основу текстуалних упутстава које даје корисник. Од одређивања жанра до истицања мелодије, корисници могу да истраже низ креативних могућности.
• Обука о екстензивном скупу музичких података: АИ модел који вози МусицГен је обучен на огромној колекцији лиценциране музике, која се састоји од 10.000 висококвалитетне нумере из Мета интерног скупа података, као и нумере добијене са Схуттерстоцк-а и Понд5. Овај разноврстан скуп података за обуку осигурава да МусицГен може задовољити широк спектар музичких стилова и жанрова.
• Брзо и лако креирање музике: МусицГен поједностављује процес генерисања нове музике пружањем корисничког интерфејса и интуитивне контроле. Музичари и продуценти могу брзо да експериментишу са различитим идејама и концептима, убрзавајући свој креативни радни ток.
• Олакшава креативно експериментисање: Уз МусицГен, уметници могу да померају границе своје креативности експериментишући са новим музичким идејама. Пружајући платформу за истраживање, МусицГен подстиче откривање нових мелодија, хармонија и ритмова.

Представљамо МусицГен: једноставан модел генерације музике који се може контролисати. МусицГен може бити подстакнут и текстом и мелодијом.
Објављујемо код (МИТ) и моделе (ЦЦ-БИ НЦ) за отворено истраживање, репродуктивност и за музичку заједницу: https://t.co/OkYjL4xDN7пиц.твиттер.цом/х1л4ЛГзИгф

— Феликс Креук (@ФеликКреук) 9. јуна 2023. године

Мета'с МусицГен наспрам Гоогле'с МусицЛМ

Гоогле је такође лансирао сопствени генератор текста за музику МусицЛМ на Гоогле И/О 2023 па хајде да упоредимо ове производе:

одлика	МусицГен	МусицЛМ
Тип модела	Једностепени (генерација музике одједном)	Хијерархијски (генерација музике у деловима)
Подаци о обуци	Мусиц сцоре	Аудио снимци
Доступност	Отвореног кода	Није отвореног кода
Снаге	Брз и једноставан за коришћење, може да генерише музику у различитим стиловима	Висококвалитетна музика која звучи као снимци из стварног света
Слабости	Може бити мање прецизан од МусицЛМ-а, можда неће моћи да генерише музику у свим стиловима	Ограничено на запослене у Гоогле-у и одабране партнере.

Предности МусицГен-а

Ево неколико конкретних примера како се МусицГен може користити у корист музичара и музичких произвођача:

• А музичар почетник може да користи МусицГен да учи о различитим музичким стиловима и техникама. Они могу да експериментишу са различитим упитима и виде како МусицГен генерише различите резултате. Ово им може помоћи да развију сопствени музички стил и да науче нове технике.
• Ан искусни музичар може да користи МусицГен да експериментише са различитим мелодијама, ритмовима и хармонијама. Ово им може помоћи да дођу до нових идеја за песме које сами не би смислили.
• А Музички продуцент може да користи МусицГен да генерише различите стилове пратећих нумера, које се могу користити за креирање различитих расположења и атмосфера.

Ограничења МусицГен-а

Променљиви квалитет излаза: Док МусицГен настоји да генерише висок квалитет музика, излаз АИ система можда неће увек испунити очекивања корисника. Због сложене природе музичке композиције и индивидуалних преференција, неки генерисани комади могу да заостају у погледу перципираног квалитета.

Како Мета отвара МусицГен за креирање музике из текстуалних упита, то означава значајну прекретницу у домену генеративних АИ алата за креирање музике. Како музичари и продуценти све више прихватају технологије вођене вештачком интелигенцијом, МусицГен нуди обећавајући пут за истраживање и иновације.

Извор: Феликс Креук Твеет