Meta lanserar en Open-Source AI Music Generator

Meta ger oss en glimt av framtiden med MusicGen, en ny AI-modell med öppen källkod som kan spotta ut korta låtar baserat på din input. Även om det är långt ifrån en färdig produkt, är MusicGen imponerande, och du kan konditionera AI:n med en befintlig melodi för att förbättra dess resultat.

Om du vill testa MusicGen AI besöker du helt enkelt webbplatsen Hugging Face , vänta på att modellen ska laddas och börja stansa iväg. MusicGen förlitar sig på textinmatning, så du måste beskriva exakt vad du vill höra ett R&B-spår från 90-talet med till exempel en vibrafon eller en metallåt med cumbia-rytm.

AI:n spottar ut ett spår som bara är 12 sekunder långt, och naturligtvis är resultaten väldigt inkonsekventa. Enkla uppmaningar verkar fungera bäst. Och om du vill bli väldigt specifik med AI:n kan du ge den en musikfil för en befintlig låt. AI:n kommer då att “konditionera” sig själv på låtens melodi, även om den inte sparar några uppladdade låtar till sin databas.

Vi presenterar MusicGen: En enkel och kontrollerbar musikgenereringsmodell. MusicGen kan uppmanas av både text och melodi.
Vi släpper kod (MIT) och modeller (CC-BY NC) för öppen forskning, reproducerbarhet och för musikgemenskapen: https://t.co/OkYjL4xDN7 pic.twitter.com/h1l4LGzYgf

&mdash ; Felix Kreuk (@FelixKreuk) 9 juni 2023

Precis som Googles MusicLM AI, som vi testade förra månaden, kan MusicGens utdata låta lite vattnig, dimmig eller utsmetad. Instrument har inte massor av definition, särskilt när du ger AI en ambitiös uppmaning. Från mina tester gör AI sällan ett bra jobb med alla “instrument” att den spelar, även om den vanligtvis har ett eller två väldefinierade och skarpa instrument.

Prompt: 90-tals Hip-Hop med en Vibrafon (Stökig, oklar bas.)

Prompt: Hair Metal with a Cumbia Rhythm (Jag är inte säker på vad jag förväntade mig. Lite coolt.)

Meta säger att MusicGen tränades på 20 000 timmar licensierad musik, inklusive låtar från biblioteken Shutterstock och Pond5. Detta är viktigt att ha i åtanke, eftersom lagermusik tenderar att ha en viss känsla och vanligtvis lutar åt elektronisk, hiphop, klassisk, och countrygenrer. Jag är säker på att AI:s datauppsättning innehåller en mängd väldigt olika spår, men den kan hantera vissa genrer bättre än andra.

Du kan testa MusicGen på Hugging Face-webbplatsen (men det kan ta ett tag innan programmet laddas). Eller besök GitHub för en mer praktisk inställning till denna AI-modell.

Källa: Meta via Felix Kreuk