Spleeter: nieuw hulpmiddel om de stem uit een nummer te halen

De stem uit een nummer verwijderen is waarschijnlijk een van de eerste processen die elke muziekliefhebber wil leren. In de loop der tijd zijn er tools voor gemaakt, maar meestal kosten ze honderden dollars. Deezer, de streamingdienst, heeft besloten om een alternatief uit te brengen in de vorm van Spleeter, een motor voor bronnenscheiding die naast het verwijderen van zang ook andere specifieke elementen kan isoleren. De tool is nog heel nieuw, maar de resultaten die op internet verschijnen zijn indrukwekkend.

Je hebt een nummer dat je leuk vindt. Je krijgt er een digitale kopie van. Je opent het binnen een audio-editor. Een wijziging hier, een aanpassing daar... en dan neem je nog een nummer. Je begint te knippen, je past de toonhoogte, de amplitude, de tijd aan. Je besluit verschillende delen te fuseren, je luistert en gaat terug naar de editor. Heen en weer totdat een mashup is geboren. Je uploadt het naar YouTube (dat waarschijnlijk zal beginnen te schreeuwen om auteursrecht) en als je een beetje geluk hebt, wordt het viraal.

Klinkt goed, toch? Het is echter een ideaal geval waarin alles perfect verloopt. In het echte leven moet de gebruiker vechten om goede samples te krijgen, en soms vereist dat iets eenvoudigs als het verwijderen van de stem uit een nummer. Met andere woorden, bronnen scheiden. Sommige enthousiastelingen hebben goede resultaten behaald met Audacity (nadruk op 'sommigen', omdat veel reacties een 'onderwatereffect' beschrijven na de verwerking), en er zijn ook plugins die stemmen kunnen isoleren, maar die zijn niet gratis (bijv. iZotope RX 7 kost 399 dollar in de standaardeditie). Vandaag biedt Deezer ons een derde optie: Spleeter.

Zo verwijder je de stem uit een nummer met Spleeter

Wat is er anders aan Spleeter? Machinaal leren. Deezer heeft het algoritme getraind met behulp van hun catalogus, een bron waar andere onderzoekers en projecten niet bij kunnen vanwege auteursrecht (en dat vergeten we de tijd en energie niet), en door hun werk met de gemeenschap te delen, verwijderen ze dat gevoel van oneerlijke concurrentie. De twee belangrijkste punten die het bereik van Spleeter momenteel beperken zijn een relatief complex installatieproces en het ontbreken van een interface. In het specifieke geval van Windows moet je eerst de volledige versie van het Anaconda-platform installeren en daarna een git-client. Spleeter is beschikbaar in twee versies: een voor processors en een die gebruikmaakt van grafische kaarten (Nvidia-hardware vereist een compatibele CUDA-driver).

De drie belangrijkste Spleeter-commando's in de console zijn separate om bronnen te scheiden, train om een alternatief scheidingsmodel te trainen met je eigen dataset, en evaluation, die het model test tegen de MusDB-set. Onder de juiste omstandigheden heeft Spleeter bewezen zeer snel te zijn: op een Xeon-server met 32 cores en een GTX 1080 verwerkte Spleeter de drieënhalf uur durende musDB in 90 seconden. Als je van plan bent een paar tracks tegelijk te verwerken, denk ik dat je geen problemen zult hebben met je hardware.

De eerste op Spleeter gebaseerde mashups zijn al op het web verschenen. Sommige zijn erg interessant, terwijl andere in de duisternis zouden moeten blijven. Andy Baio van Waxy geeft ons een vrij nauwkeurig idee:

De rest is wachten op een vriendelijkere omgeving voor de gemiddelde gebruiker. Het potentieel van Spleeter om de stem uit een nummer te verwijderen en andere bronnen te scheiden is gigantisch, vooral omdat het gratis en open source is.

Officiële aankondiging: Klik hier

Bron: Waxy.org