Avoimen lähdekoodin musiikintuotanto-AI-malliperhe, joka pystyy luomaan kokopitkiä kappaleita: YuE
YuE pystyy luomaan kokopitkiä kappaleita johdonmukaisilla lauluosuuksilla, instrumentaalisella harmonialla ja monigenreisen luovuuden avulla.
YuE erottuu aiemmista tekoälypohjaisista musiikintuottomalleista, koska se pystyy generoimaan kokopitkiä kappaleita, joissa on laulumelodioita ja instrumentaalisäestyksiä. YuE ylläpitää musiikillista koherenssia koko kappaleen ajan. Generoidut lauluosuudet noudattavat luonnollisia laulukuvioita ja sävelmuutoksia, tehden musiikista kiehtovaa. Samalla instrumenttielementit on huolellisesti sovitettu lauluraitaan, tuottaen luonnollisen ja tasapainoisen kappaleen. Malliperhe tukee myös useita musiikkityylejä ja kieliä.
YuE edustaa läpimurtoa tekoälyavusteisessa musiikintuotannossa, ratkaisten pitkään jatkuneet haasteet sanoitusten ja kappaleiden muuntamisessa.
Joitakin YuE-sarjan malleja Hugging Facessa ovat:
YuE-s1-7B-anneal-en-cot
YuE-s1-7B-anneal-en-icl
YuE-s1-7B-anneal-jp-kr-cot
YuE-s1-7B-anneal-jp-kr-icl
YuE-s1-7B-anneal-zh-cot
YuE-s1-7B-anneal-zh-icl
YuE-s2-1B-general
YuE-upsampler
Käytettäessä YuE-malleja suositellaan vähintään 80 GB:n GPU-muistia (esim. NVIDIA A100) parhaiden tulosten saavuttamiseksi. Käyttäjät voivat hyödyntää Hugging Face Transformers -kirjastoa musiikin generoimiseen YuE:n avulla.
Kommentit (4)
Pitää tutustua tähän:
Käyttäjät voivat hyödyntää Hugging Face Transformers -kirjastoa musiikin generoimiseen YuE:n avulla.
Luulen että koska toi on avoimen lähdekoodin alainen, niin pian joku luo demo mahdollisuuden.
Aika huikee kuitenkin.
Voi tehdä kokonaisia kappaleita helposti ja ilmaiseksi ( jos on muistia tarpeeksi, tavalla tai toisella ).
Tää versio voisi toimia kotikoneella. Jos on GPU.
Hugging Face:
YuE-s2-1B-general
Monellako täällä luulet että on 80gb+ muistia näytönohjaimessa?????