La photogrammétrie en production

Cinéma et VFX

Environnements réels - numériser des décors et lieux de tournage est désormais une pratique standard dans les productions VFX modernes. Les extensions CG de décors physiquement limités permettent d'agrandir virtuellement un lieu tout en maintenant une cohérence visuelle parfaite avec les prises de vue réelles. Des lieux inaccessibles peuvent être reconstruits virtuellement à partir d'archives photographiques. La destruction VFX de vraies structures scannées produit un niveau d'authenticité impossible à atteindre autrement.

Doublures numériques - le scan facial d'acteurs pour la capture de performance est central dans les productions à grand spectacle contemporaines. Des scans faciaux haute résolution, capturés avec des rigs de scan multi-caméras synchronisées, créent des doublures numériques d'une fidélité saisissante. Le scan de corps avec les costumes complets permet aux équipes de simuler le comportement du tissu avec les costumes réels de production.

Jeux AAA

Monde ouvert - les productions AAA modernes (The Witcher, Red Dead Redemption, Horizon) utilisent massivement la photogrammétrie pour peupler leurs vastes environnements. Des drones équipés de LiDAR et de caméras photographient le terrain réel pour en extraire topographie et textures ; des bibliothèques d'assets de roche, de sol, de végétation et de props sont construites à partir de scans.

Visualisation architecturale - bénéficie directement de la photogrammétrie pour numériser des bâtiments existants destinés à la rénovation ou l'extension. Les vrais matériaux scannés permettent des études d'éclairage précises et des présentations clients en temps réel sous Unity HDRP ou Unreal Engine ; les visites VR permettent aux clients de se déplacer dans leurs futurs espaces bien avant le début de la construction.

Jeux historiques - les titres à thème historique (Assassin's Creed, Ghost of Tsushima) exploitent la photogrammétrie pour numériser des sites historiques préservés et des artefacts de musée, garantissant une authenticité culturelle que les artistes seuls ne pourraient atteindre.

Conservation du patrimoine

Archivage numérique - la photogrammétrie et le scan LiDAR sont désormais des outils standards de conservation du patrimoine. Les monuments menacés par la décrépitude, les conflits ou le changement climatique sont numérisés en haute résolution pour constituer une archive numérique permanente. Les collections de musées - sculptures, céramiques, objets archéologiques - sont numérisées pour un accès public en ligne sans manipuler les originaux.

Restauration virtuelle - numériser le même monument à différentes périodes permet une analyse quantitative de la dégradation temporelle. Reconstruire virtuellement des états d'origine - avant érosion, avant vandalisme - devient possible grâce aux documents historiques numérisés.

Production virtuelle

La production virtuelle sur mur LED - popularisée par The Mandalorian et depuis adoptée par de nombreuses productions - repose presque entièrement sur des environnements numérisés via photogrammétrie ou LiDAR. Les acteurs jouent devant des murs d'écrans LED affichant des environnements temps réel rendus dans Unreal Engine, avec un système de tracking de caméra adaptant la perspective de l'environnement en temps réel.

Le pipeline de production standard

Un pipeline de production complet pour un asset de photogrammétrie se découpe en six étapes : Capture (photos ou scan LiDAR sur site ou en studio), Process (génération du nuage de points et du maillage initial), Houdini (nettoyage de maillage, retopologie, génération de LOD), Texturing (baking des textures PBR en 4K-8K), Unity (import HDRP, configuration des matériaux et LOD Group, intégration dans la scène), et Final (éclairage, compositing, rendu ou export).

Bonnes pratiques de capture

Photogrammétrie

• Chevauchement - maintenir un chevauchement de 60-80% entre toutes les images ; un chevauchement insuffisant produit des trous dans la reconstruction.
• Éclairage - privilégier un éclairage diffus et uniforme - ciel couvert en extérieur, softboxes en studio. Les ombres dures créent des artefacts géométriques irréparables.
• Focus - s'assurer que chaque zone du sujet est nette ; une mise au point incohérente est l'une des causes les plus fréquentes d'échec de reconstruction.
• Stabilité - utiliser un trépied ou une prise en main très stable pour éviter le flou de mouvement.
• Couverture - varier les angles de prise de vue sur plusieurs plans (bas, moyen, haut) pour capturer la géométrie dans toutes ses dimensions.

Scan LiDAR

• Positions multiples - placer le scanner à plusieurs positions complémentaires pour assurer une couverture complète sans zones d'ombre.
• Registration - prévoir au moins 30% de chevauchement entre scans adjacents pour permettre un alignement automatique.
• Cibles - utiliser des sphères de référence ou des marqueurs plans pour améliorer la précision d'alignement entre positions.
• Résolution - calibrer la résolution de scan selon l'usage final ; la résolution maximale n'est pas toujours nécessaire et génère des fichiers inutilement volumineux.
• Conditions météo - pour les scans extérieurs, éviter pluie, brouillard et chaleur extrême.

Optimisation en production

Maillage - un workflow d'optimisation de maillage efficace repose sur une retopologie quad-flow propre respectant les lignes de flux naturelles de la géométrie. La génération automatique de LOD devrait être systématique pour tout asset destiné à un usage temps réel. La décimation intelligente via PolyReduce devrait cibler un budget de polygones fixé par le directeur technique selon les contraintes de la plateforme cible.

Textures - la résolution de texture devrait correspondre à la taille apparente de l'asset dans la scène : 4K pour un prop de premier plan, 2K pour des assets à distance moyenne, 1K ou moins pour des assets distants. La génération automatique de mipmaps n'est pas négociable.

Performance - l'occlusion culling élimine le rendu d'objets non visibles. Le batching de draw calls - le GPU Instancing pour les assets répétés - est particulièrement efficace dans les environnements scannés où les mêmes rochers, dalles et props sont instanciés des centaines de fois. Le profiling régulier avec l'Unity Profiler et le Frame Debugger identifie et corrige les goulots d'étranglement avant qu'ils ne deviennent des problèmes au stade de la production.

Outils de pipeline essentiels

Vers où cela nous mène

L'IA et le machine learning transforment déjà la reconstruction automatique : les réseaux de neurones améliorent la qualité de reconstruction à partir de captures incomplètes, réduisent le bruit, et comblent les zones manquantes par inférence - la reconstruction temps réel sur smartphone devient réaliste. La démocratisation de la capture mobile via le LiDAR des smartphones Apple et des applications dédiées (Polycam, Scaniverse, RealityScan) met une photogrammétrie de qualité décente dans la poche de n'importe quel artiste ou technicien de terrain.

Les Neural Radiance Fields (NeRF) pourraient représenter la révolution la plus profonde à venir : cette technologie encode une scène tridimensionnelle dans un réseau de neurones entraîné sur un ensemble de photos, générant de nouvelles vues de la scène depuis n'importe quel point de vue avec une qualité remarquablement photoréaliste.

La photogrammétrie et le scan 3D ont fondamentalement transformé les standards de réalisme atteignables en VFX et en production temps réel. En capturant la géométrie et l'apparence exactes du monde physique, ces technologies érodent la frontière entre réel et virtuel - à condition de maîtriser le pipeline complet, de la capture sur le terrain jusqu'à l'asset final optimisé. Au-delà des outils eux-mêmes, ce qui compte c'est la pensée pipeline : la capacité à choisir la bonne technique pour chaque contrainte de production, anticiper les problèmes en amont, et maintenir une organisation procédurale permettant une itération rapide.

Ressources

Logiciels

• RealityCapture : capturingreality.com
• Agisoft Metashape : agisoft.com
• CloudCompare : cloudcompare.org
• Meshroom (AliceVision) : alicevision.org
• PCX (Keijiro Takahashi) : github.com/keijiro/Pcx
• VFXToolbox (Unity) : github.com/Unity-Technologies/VFXToolbox

Sources de données gratuites

Pour tester des workflows PCX ou VFX Graph dans Unity, un fichier contenant des points colorisés (.ply ou .las) est nécessaire. Trois sources gratuites et libres de droits : Sketchfab (filtrer par Downloadable + Point Cloud - le créateur Laslo.S propose des scans massifs comme une forêt à 950k sommets, utile pour stress-tester la performance de VFX Graph), Artec 3D (un catalogue gratuit de scans géométriques haute précision - pièces mécaniques, corps humain, œuvres d'art - issus de leurs scanners professionnels), et des banques de données LiDAR comme Arrival3D (échantillons de scan laser en .las/.e57 spécifiquement pour tester des workflows de post-production) et NSF NEON (des packages de nuages de points LiDAR éducatifs de paysages naturels, nécessitant un nettoyage dans Houdini avant baking pour Unity).

Apprentissage

• Tutoriels SideFX : sidefx.com/tutorials
• Unity Learn HDRP : learn.unity.com
• Sketchfab (bibliothèque de modèles scannés) : sketchfab.com
• Polyhaven (assets PBR libres de droits) : polyhaven.com
• Documentation NeRF / Gaussian Splatting : nerf.studio