Ils peuvent générer des images, écrire du code, créer des transcriptions. L'intelligence artificielle attaque de multiples fronts à la fois, mais sa garantie de succès est encore loin. L'un des domaines les plus complexes est la musique : nous avons déjà exploré des initiatives comme MusicLM, SongR AI (avec voix et paroles), et TextToSample, mais quelle est la qualité de l'algorithme pour séparer les instruments ? Le projet free-music-demixer veut le découvrir avec une plateforme automatique, gratuite et hors ligne.
Séparer les sources d'une chanson n'est pas nouveau. En fait, supprimer la voix pour créer une version karaoké est l'un des exemples les plus courants de séparation, mais Android et YouTube ont éliminé une partie du travail. Cependant, cela reste un bon exercice pour les nouveaux algorithmes. C'est dans cette optique que nous arrivons à free-music-demixer, une plateforme de séparation de sources basée sur Open-Unmix, et le modèle pré-entraîné UMX-L.
Comment séparer les sources d'une chanson avec free-music-demixer
Le démixeur fonctionne localement dans le navigateur, et la seule téléchargement requis est celui du modèle, d'une taille moyenne de 45 mégaoctets (je n'ai vu aucun indicateur de progression, il faut donc attendre que le site signale sa fin). Ensuite, il suffit de sélectionner la chanson à traiter, et de cliquer sur le bouton «Charger l'audio et démixer».
En quelques minutes, free-music-demixer présentera cinq fichiers audio avec ses résultats : Basse, Batterie, Voix, Autres et Karaoké. Inutile de dire que les résultats dépendent de multiples facteurs, allant de la qualité originale de la chanson jusqu'au genre, en passant par le tempo et le type d'instruments présents. Mes tests ont été limités, mais je peux dire qu'il a fait un travail plus ou moins correct pour isoler la batterie et générer la version karaoké.
Pour finir, le site inclut une démo (au cas où le modèle ne pourrait pas s'exécuter pour une raison quelconque), et un mode spécial qui sépare les sources par lots, en traitant plus d'une chanson à la fois. Son développeur avertit également que free-music-demixer met un peu de pression supplémentaire sur le CPU et la RAM, et que la licence UMX-L ne permet qu'une utilisation à but non commercial. Lien en bas !
Site officiel : Cliquez ici