L'intelligence artificielle et le monde du cinéma entretiennent une relation très tendue… mais inévitable. Nous avons déjà les deepfakes, la synthèse vocale, la correction d'accents, le rajeunissement numérique, et voici maintenant le tour du « doublage visuel ». Qu'est-ce que cela signifie ? Que quelqu'un peut tourner un film dans une langue spécifique, préparer le doublage dans une autre, puis altérer/synchroniser le mouvement des lèvres à l'aide de l'intelligence artificielle. La production suédoise Watch the Skies de 2022 a été présentée comme « la première » à utiliser cette technologie, et elle arrivera dans les salles américaines le 9 mai.

Watch the Skies : un film avec « doublage visuel » qui utilise l'intelligence artificielle
Watch the Skies : un film avec « doublage visuel » utilisant l'intelligence artificielle

Le cinéma et la télévision nous ont « offert » de nombreux cas de CGI et d'intelligence artificielle immature ou mal appliquée. Sans aller trop loin, les deepfakes de Rogue One et la deuxième saison de The Mandalorian étaient plutôt médiocres, mais le deepfake de Luke dans The Book of Boba Fett a fait un bond de qualité gigantesque, Tom Hanks et Robin Wright ont perdu plusieurs décennies d'âge dans Here, et The Brutalist (qui a remporté trois Oscars) a bénéficié d'un traitement par IA pour « optimiser l'accent hongrois » de ses personnages principaux.

En résumé, la technologie s'améliore… à tel point qu'en 2023, la SAG-AFTRA a fait une grève de près de quatre mois pour protéger ses membres « de la menace de l'IA », et elle poursuit encore sa revendication dans le domaine des jeux vidéo (depuis juillet 2024 à ce jour). Mais que se passe-t-il lorsque les acteurs eux-mêmes participent au processus génératif ? La réponse est quelque chose comme Watch the Skies, une production suédoise de 2022, qui utilise un « doublage visuel » vers l'anglais :

Watch the Skies : du suédois à l'anglais, avec l'intelligence artificielle

À partir du 9 mai, la chaîne AMC amènera dans ses salles une édition alternative de Watch the Skies avec deux changements importants : un dialogue en anglais enregistré par les acteurs originaux, et la synchronisation du mouvement de leurs lèvres dans le film. Cela a été possible grâce à la technologie TrueSync de la société Flawless, qui vise à réduire la difficulté de certaines productions étrangères à entrer sur de nouveaux marchés. Cela est particulièrement vrai aux États-Unis, où le rejet des sous-titres est généralisé. Je me souviens encore de Bong Joon-ho, réalisateur de Parasite, lorsqu'il a invité le public aux Golden Globes à « surmonter la barrière d'un pouce » des sous-titres, sans grand succès.

Le portail Variety rapporte que l'outil TrueSync est compatible avec les nouvelles exigences de la SAG-AFTRA, mais il sera très intéressant d'entendre la parole du syndicat une fois que Watch the Skies (titre original UFO Sweden) arrivera sur cent écrans d'AMC. Comment cela fonctionne-t-il ? Logiquement, Flawless a choisi les meilleures images pour montrer sa technologie, mais la bande-annonce complète devrait apparaître dans les prochains jours. Radar allumé.

Source : Variety