The Amber Square

La méthode · 02

Un visage, un bâtiment

Le problème le plus difficile de la vidéo par IA n’est pas de réussir un bon plan. C’est de faire en sorte que le cinquantième plan montre la même personne, dans le même bâtiment, que le premier.

Un visage

Le visage de Lex a été conçu une seule fois, sous la forme d’une série de portraits de référence validés, et chaque plan de Lex est généré à partir d’eux. Les yeux ont trois états validés (sombre, braise, ambre plein) parce que l’histoire a besoin qu’ils changent au moment voulu.

Les trois états des yeux sur une même planche de visage.
La planche des états des yeux qui sert à vérifier les plans.

Un bâtiment

Les modèles d’image et de vidéo inventent tout ce qui se trouve hors champ. Cela ne pose aucun problème pour un plan isolé, mais c’est fatal pour un mouvement de caméra à travers un bâtiment : à la fin du film, la caméra traverse le sol pour descendre dans la salle du dessous, et l’ouverture dans le sol changeait sans cesse de taille, ou se dédoublait, d’une prise à l’autre.

La solution a été de cesser de demander au modèle d’imaginer le bâtiment et de lui en donner un. Les salles ont été construites sous forme de décors 3D simples dans Blender. La première et la dernière image d’un mouvement sont rendues à partir du même décor, puis restylisées, et seul le mouvement entre les deux est laissé au modèle vidéo.

Rendu Blender de la salle du bas vue d’en haut, une chaîne de production de robots jaunes et orange.
Le décor de la salle du bas, caméra au-dessus de la chaîne.
Rendu Blender de la salle du bas, face aux portes de l’ascenseur et à un comptoir.
Même décor, contrechamp.
La salle du bas dans le film terminé.
La même salle dans le film terminé.