Ze kunnen afbeeldingen genereren, ze kunnen code schrijven, ze kunnen transcripties maken. Kunstmatige intelligentie bestrijdt meerdere fronten tegelijk, maar het succes is nog lang niet gegarandeerd. Een van de meest complexe gebieden is muziek: we hebben eerder initiatieven verkend zoals MusicLM, SongR AI (met stem en tekst) en TextToSample, maar hoe goed is het algoritme in het scheiden van instrumenten? Het project free-music-demixer wil dat uitzoeken met een automatisch, gratis en offline platform.
Het scheiden van de bronnen van een nummer is niets nieuws. Sterker nog, het verwijderen van de stem om een karaokeversie te maken is een van de meest voorkomende voorbeelden van scheiding, maar Android en YouTube hebben een deel van het zware werk overgenomen. Het blijft echter een goede oefening voor de nieuwe algoritmen. Met dat in gedachten komen we bij free-music-demixer, een platform voor bronscheiding op basis van Open-Unmix en het voorgetrainde UMX-L-model.
Hoe scheid je de bronnen van een nummer met free-music-demixer
De demixer werkt lokaal in de browser, en de enige download die nodig is, is die van het model, met een gemiddelde grootte van 45 megabytes (ik heb geen voortgangsindicator gezien, dus je moet wachten tot de site aangeeft dat het klaar is). De rest is een kwestie van het nummer selecteren en klikken op de knop “Load audio and demix”.
Binnen enkele minuten presenteert free-music-demixer vijf audiobestanden met de resultaten: Bass, Drums, Vocals, Other en Karaoke. Het spreekt voor zich dat de resultaten afhankelijk zijn van meerdere factoren, van de oorspronkelijke kwaliteit van het nummer tot het genre, via het tempo en het type aanwezige instrumenten. Mijn tests waren beperkt, maar ik kan zeggen dat het een redelijk behoorlijk werk deed bij het isoleren van de drums en het genereren van de karaoke-versie.
Tot slot bevat de site een demo (voor het geval het model om de een of andere reden niet kan worden uitgevoerd), en een speciale modus die bronnen in batches scheidt, waardoor meer dan één nummer tegelijk wordt verwerkt. De ontwikkelaar waarschuwt ook dat free-music-demixer wat extra druk op de CPU en het RAM-geheugen legt, en dat de UMX-L-licentie alleen niet-commercieel gebruik toestaat. Link hieronder!
Officiële site: Klik hier
