MetaHuman : un humain numérique animé avec un iPhone
Construire, éclairer et animer le visage d’un personnage photoréaliste dans Unreal Engine
- metahuman
- unreal-engine
- live-link-face
- temps-réel
Avant que les modèles de diffusion sachent peindre un visage crédible, les moteurs temps réel pouvaient déjà le rendre. MetaHuman est le framework d’Epic Games pour créer des humains numériques photoréalistes qui tournent dans Unreal Engine à des fréquences interactives : un créateur dans le cloud pour le visage et le corps, un rig avec des centaines de contrôles faciaux, et des shaders de cheveux, d’yeux et de peau affinés par des gens qui font ça pour le cinéma.
Ce fut mon premier projet pratique avec lui, en 2023, et la raison pour laquelle je reviens toujours vers la 3D temps réel à côté de l’IA générative : les deux convergent, et comprendre les deux côtés est l’enjeu.
Ce que j’ai construit
- Le personnage. Configuré dans MetaHuman Creator à partir d’un mélange de visages prédéfinis, puis sculpté (mâchoire, sourcil, écartement des yeux) et doté de détails de peau, cheveux et vêtements. Exporté vers Unreal Engine 5 via Quixel Bridge.
- Études d’éclairage. Le même personnage rendu avec trois schémas (lumière principale douce, lumière latérale dure, ambiance froide) pour comprendre comment le shader de peau réagit à la lumière. Les images ci-dessous sortent directement du moteur, sans retouche.
- Performance faciale. Avec l’app Live Link Face sur un iPhone, mon propre visage a été suivi par la caméra TrueDepth et transmis au rig du MetaHuman en temps réel. Le clip d’en-tête est une petite cinématique montée dans Sequencer à partir de cette capture.
Capture faciale
Pourquoi ça compte encore
La vidéo générative peut désormais produire un visage comme celui-ci à partir d’un prompt, comme le montre l’expérience avec FLUX et Wan2.1. Ce qu’elle ne peut pas encore faire, c’est vous donner un personnage que vous contrôlez image par image, que vous rééclairez, repositionnez et dirigez avec une performance. MetaHuman est ce contrôle. Les projets intéressants des prochaines années combineront les deux : modèles génératifs pour le concept, la texture et le décor ; rigs temps réel pour la mise en scène.
