Meta Open-sources Generative AI Tool MusicGen, ki lahko ustvari glasbo iz besedilnih pozivov – TechCult
Miscellanea / / June 13, 2023
Meta, priznano tehnološko podjetje, ki stoji za različnimi prelomnimi inovacijami, je nedavno predstavilo svoj najnovejši dosežek na področju umetne inteligence, saj odpira vire MusicGen za ustvarjanje glasbe iz besedilnih pozivov. Ta odprtokodni glasbeni generator, ki ga poganja AI, ima izjemno sposobnost ustvarjanja edinstvenih skladb na podlagi besedilnih pozivov.
![Meta Open-sources Generative AI Tool MusicGen, ki lahko ustvari glasbo iz besedilnih pozivov](/f/7166f2dcf7ee1b1f193906d34a92db14.png)
Kazalo
Kako deluje MusicGen
MusicGen deluje z uporabo najsodobnejšega AI model usposobljeni na obsežnem naboru podatkov o licenčni glasbi. Proces usposabljanja je vključeval analizo velike zbirke 20.000 ur visokokakovostnih glasbenih posnetkov, vključno z notranjim naborom podatkov Mete in skladb, pridobljenih iz Shutterstock in Pond5. Ta raznolik korpus glasbenih stilov in zvrsti omogoča MusicGenu, da ponuja široko paleto ustvarjalnih možnosti.
Za optimizacijo delovanja je Meta uporabila njihove 32Khz EnCodec audio tokenizer, ki razdeli glasbo na manjše dele
. To omogoča vzporedno obdelavo, kar ima za posledico hitrejše in učinkovitejše ustvarjanje glasbe. Uporabniki lahko vnašajo različne besedilni pozivi, kot je določen žanr ali melodija, da vodijo MusicGen pri ustvarjanju skladbe, ki se ujema z njihovo želeno glasbeno smerjo.Poleg tega MusicGen uporabnikom omogoča posredujte referenčno zvočno datoteko, ki služi kot načrt za ustvarjanje nove glasbe. Z uskladitvijo ustvarjene kompozicije z referenčno skladbo ponuja MusicGen edinstveno priložnost za ustvarjanje harmoničnih skladb, ki odmevajo z uveljavljenimi melodijami ali pesmimi.
![MusicGen na objemajočem se obrazu | Meta Open-sources MusicGen za ustvarjanje glasbe iz besedilnih pozivov](/f/a73d6a597690a4f5d6523c837a4af9c5.png)
Katere so funkcije MusicGen
- Generiranje glasbe na podlagi besedilnih pozivov: MusicGen izkorišča moč umetne inteligence za ustvarjanje izvirnih glasbenih kompozicij na podlagi besedilnih pozivov, ki jih posreduje uporabnik. Uporabniki lahko raziskujejo vrsto ustvarjalnih možnosti, od določanja žanra do orisa melodije.
- Usposabljanje o obsežnem naboru glasbenih podatkov: Model AI, ki poganja MusicGen, je bil usposobljen za obsežno zbirko licenčne glasbe, ki obsega 10.000 visokokakovostne skladbe iz Metinega internega nabora podatkov, kot tudi skladbe, pridobljene s strani Shutterstock in Ribnik5. Ta raznolik nabor podatkov o usposabljanju zagotavlja, da lahko MusicGen poskrbi za širok spekter glasbenih stilov in zvrsti.
- Hitro in enostavno ustvarjanje glasbe: MusicGen poenostavlja postopek ustvarjanja nove glasbe z zagotavljanjem uporabniku prijaznega vmesnika in intuitivnih kontrolnikov. Glasbeniki in producenti lahko hitro eksperimentirajo z različnimi idejami in koncepti, kar pospeši njihov ustvarjalni tok dela.
- Omogoča ustvarjalno eksperimentiranje: Z MusicGen lahko umetniki premikajo meje svoje ustvarjalnosti z eksperimentiranjem z novimi glasbenimi idejami. Z zagotavljanjem platforme za raziskovanje MusicGen spodbuja odkrivanje novih melodij, harmonij in ritmov.
Predstavljamo MusicGen: preprost model ustvarjanja glasbe, ki ga je mogoče nadzorovati. MusicGen lahko pozove besedilo in melodijo.
Objavljamo kodo (MIT) in modele (CC-BY NC) za odprte raziskave, ponovljivost in za glasbeno skupnost: https://t.co/OkYjL4xDN7pic.twitter.com/h1l4LGzYgf— Felix Kreuk (@FelixKreuk) 9. junij 2023
Metin MusicGen proti Googlovemu MusicLM
Tudi Google je na Google I/O 2023 lansiral lasten generator besedila v glasbo MusicLM zato primerjajmo te izdelke:
Funkcija | MusicGen | MusicLM |
Vrsta modela | Enostopenjski (ustvarjanje glasbe naenkrat) | Hierarhično (ustvarjanje glasbe po delih) |
Podatki o usposabljanju | Glasbene partiture | Zvočni posnetki |
Razpoložljivost | Odprtokodno | Ni odprtokoden |
Prednosti | Hiter in enostaven za uporabo, lahko ustvarja glasbo v različnih slogih | Visokokakovostna glasba, ki zveni kot posnetki iz resničnega sveta |
Slabosti | Lahko je manj natančen kot MusicLM, morda ne bo mogel ustvariti glasbe v vseh stilih | Omejeno na Googlove zaposlene in izbrane partnerje. |
Prednosti MusicGen
Tukaj je nekaj konkretnih primerov, kako je mogoče MusicGen uporabiti v korist glasbenikov in glasbenih producentov:
- A glasbenik začetnik lahko uporablja MusicGen za spoznavanje različnih glasbenih stilov in tehnik. Lahko eksperimentirajo z različnimi pozivi in vidijo, kako MusicGen ustvari različne rezultate. To jim lahko pomaga razviti lasten glasbeni stil in se naučiti novih tehnik.
- An izkušen glasbenik lahko uporablja MusicGen za eksperimentiranje z različnimi melodijami, ritmi in harmonijami. To jim lahko pomaga, da pridejo do novih idej za pesmi, ki se jih sami ne bi domislili.
- A glasbeni producent lahko uporablja MusicGen za ustvarjanje različnih stilov spremljajočih skladb, ki jih je mogoče uporabiti za ustvarjanje različnih razpoloženj in vzdušij.
Omejitve MusicGen
Spremenljiva izhodna kakovost: Medtem ko si MusicGen prizadeva ustvariti visoko kakovost glasba, rezultat sistema AI morda ne bo vedno izpolnil pričakovanj uporabnikov. Zaradi zapletene narave glasbene kompozicije in individualnih preferenc lahko nekateri ustvarjeni deli ne dosegajo zaznane kakovosti.
Ker Meta ponuja odprtokodni program MusicGen za ustvarjanje glasbe iz besedilnih pozivov, pomeni pomemben mejnik na področju generativnih orodij AI za ustvarjanje glasbe. Ker glasbeniki in producenti vedno bolj sprejemajo tehnologije, ki jih poganja AI, MusicGen ponuja obetavno pot za raziskovanje in inovacije.
Vir: Felix Kreuk Tweet
![Alex Craig](/f/82c0af5dbedfba7e1fc95a8d7136c74d.jpg)
Alex Craig
Alexa žene strast do tehnologije in igralnih vsebin. Ne glede na to, ali gre za igranje najnovejših video iger, spremljanje najnovejših tehnoloških novic ali sodelovanje z drugimi podobno mislečimi posamezniki na spletu je Alexova ljubezen do tehnologije in iger očitna v vsem, kar on počne.
Alexa žene strast do tehnologije in igralnih vsebin. Ne glede na to, ali gre za igranje najnovejših video iger, spremljanje najnovejših tehnoloških novic ali sodelovanje z drugimi podobno mislečimi posamezniki na spletu je Alexova ljubezen do tehnologije in iger očitna v vsem, kar on počne.