Sie können Bilder generieren, Code schreiben und Transkriptionen erstellen. Die künstliche Intelligenz greift an vielen Fronten gleichzeitig an, aber ihre Erfolgsgarantie liegt noch in weiter Ferne. Eines der komplexesten Gebiete ist die Musik: Wir haben bereits Initiativen wie MusicLM, SongR AI (mit Stimme und Text) und TextToSample erkundet, aber wie gut ist der Algorithmus beim Trennen von Instrumenten? Das Projekt free-music-demixer will das mit einer automatischen, kostenlosen und offline nutzbaren Plattform herausfinden.
Die Trennung der Quellen eines Songs ist nicht gerade neu. Tatsächlich ist das Entfernen der Stimme für eine Karaoke-Version eines der häufigsten Beispiele für die Trennung, aber Android und YouTube haben einen Teil der Schwerarbeit übernommen. Dennoch ist es eine gute Übung für die neuen Algorithmen. In diesem Sinne kommen wir zu free-music-demixer, einer Plattform zur Quellentrennung, die auf Open-Unmix und dem vortrainierten Modell UMX-L basiert.
So trennen Sie die Quellen eines Songs mit free-music-demixer
Der Demixer arbeitet lokal im Browser, und der einzige Download, den er erfordert, ist das Modell mit einer durchschnittlichen Größe von 45 Megabyte. (Ich habe keinen Fortschrittsbalken gesehen, daher muss man warten, bis die Website das Ende meldet.) Der Rest besteht darin, den zu verarbeitenden Song auszuwählen und auf die Schaltfläche "Load audio and demix" zu klicken.
In wenigen Minuten wird free-music-demixer fünf Audiodateien mit seinen Ergebnissen präsentieren: Bass, Drums, Vocals, Other und Karaoke. Es versteht sich von selbst, dass die Ergebnisse von mehreren Faktoren abhängen, von der Originalqualität des Songs über das Genre bis hin zu Tempo und der Art der vorhandenen Instrumente. Meine Tests waren begrenzt, aber ich kann sagen, dass es eine mehr oder weniger ordentliche Arbeit geleistet hat, wenn es darum ging, das Schlagzeug zu isolieren und die Karaoke-Version zu erzeugen.
Zum Abschluss bietet die Website eine Demo (falls das Modell aus irgendeinem Grund nicht ausgeführt werden kann) und einen speziellen Modus, der Quellen in Stapeln trennt und mehr als einen Song gleichzeitig verarbeitet. Der Entwickler warnt auch davor, dass free-music-demixer etwas zusätzlichen Druck auf die CPU und den Arbeitsspeicher ausübt und dass die UMX-L-Lizenz nur eine nicht-kommerzielle Nutzung erlaubt. Link weiter unten!
Offizielle Website: Klicken Sie hier
