Le film à 50 millions de dollars « Here » dé-vieilli Tom Hanks avec l’IA générative

Vendredi, TriStar Pictures a publié Iciun film de 50 millions de dollars réalisé par Robert Zemeckis qui a utilisé des techniques de transformation faciale générative en temps réel pour incarner les acteurs Tom Hanks et Robin Wright sur une période de 60 ans, marquant l’un des premiers longs métrages hollywoodiens construits autour d’effets visuels alimentés par l’IA. .

Le film adapte un roman graphique 2014 se déroulant principalement dans un salon du New Jersey sur plusieurs périodes. Plutôt que de choisir différents acteurs pour différents âges, la production a utilisé l’IA pour modifier les apparences de Hanks et Wright tout au long du film.

La technologie anti-vieillissante vient de Métaphysiqueune société d’effets visuels qui crée des effets d’échange de visage et de vieillissement en temps réel. Pendant le tournage, l’équipe a regardé deux moniteurs simultanément : l’un montrant les apparitions réelles des acteurs et un autre les affichant quel que soit l’âge requis par la scène.

Metaphysic a développé le système de modification faciale en entraînant des modèles d’apprentissage automatique personnalisés sur les images des films précédents de Hanks et Wright. Cela comprenait un vaste ensemble de données sur les mouvements du visage, les textures de la peau et les apparences dans des conditions d’éclairage et des angles de caméra variés. Les modèles résultants peuvent générer des transformations de visage instantanées sans les mois de travail manuel de post-production qu’exige le CGI traditionnel.

Contrairement aux effets de vieillissement précédents qui reposaient sur une manipulation image par image, l’approche de Metaphysic génère instantanément des transformations en analysant les repères du visage et en les mappant aux variations d’âge entraînées.

« Vous n’auriez pas pu faire ce film il y a trois ans », Zemeckis dit Le New York Times dans un article détaillé sur le film. Les effets visuels traditionnels pour ce niveau de modification du visage nécessiteraient des centaines d’artistes et un budget beaucoup plus important, plus proche des coûts standard des films Marvel.

Ce n’est pas le premier film à utiliser des techniques d’IA pour vieillir acteurs. L’approche d’ILM pour vieillir Harrison Ford en 2023 Indiana Jones et le cadran du destin a utilisé un système propriétaire appelé Flux avec des caméras infrarouges pour capturer des données faciales pendant le tournage, puis d’anciennes images de Ford pour le vieillir en post-production. En revanche, les modèles d’IA de Metaphysic traitent les transformations sans matériel supplémentaire et affichent les résultats pendant le tournage.

Grondements dans les syndicats

Le film Ici arrive alors que les grands studios explorent les applications de l’IA au-delà des simples effets visuels. Des entreprises comme Runway ont été développer des outils de génération de texte en vidéotandis que d’autres créent des systèmes d’IA comme Callaïa pour l’analyse du scénario et la planification de la pré-production. Cependant, les récents contrats de guilde imposent des limites strictes à l’utilisation de l’IA dans les processus créatifs comme l’écriture de scénarios.

Pendant ce temps, comme nous l’avons vu avec le Grève syndicale SAG-AFTRA L’année dernière, les studios et les syndicats d’Hollywood ont continué à débattre vivement du rôle de l’IA dans le cinéma. Alors que la Screen Actors Guild et la Writers Guild ont obtenu certaines limitations de l’IA dans leurs récents contrats, de nombreux vétérans de l’industrie considèrent la technologie comme inévitable. « Tout le monde est nerveux », a déclaré Susan Sprung, PDG de la Producers Guild of America, au New York Times. « Et pourtant, personne ne sait vraiment de quoi être nerveux. »

Néanmoins, le New York Times affirme que la technologie de Metaphysic a déjà été utilisée dans deux autres versions de 2024. Furiosa : Une saga Mad Max l’a utilisé pour recréer le personnage de l’acteur décédé Richard Carter, tandis que Extraterrestre : Romulus a ramené le personnage androïde de Ian Holm de l’original de 1979. Les deux mises en œuvre nécessitaient l’approbation de la succession en vertu nouvelle législation californienne régissant les recréations d’artistes IA, souvent appelées deepfakes.

Tout le monde n’est pas satisfait de la façon dont la technologie de l’IA se déploie dans le cinéma. Robert Downey Jr. récemment dit dans une interview qu’il demanderait à sa succession de poursuivre en justice quiconque tenterait de le ramener numériquement d’entre les morts pour une autre apparition au cinéma. Mais même avec des controverses, Hollywood semble toujours trouver un moyen de faire en sorte que des exploits visuels défiant la mort (et défiant l’âge) se déroulent à l’écran, surtout s’il y a suffisamment d’argent en jeu.

Cette histoire a été initialement publiée sur Ars Technica.