- Le clip du nouveau morceau « Helicopter » d’A$AP Rocky met en scène presque toutes les performances des personnages au moyen de la capture volumétrique et du Gaussian Splatting
- Le tournage a utilisé un ensemble de 56 caméras RGB-D d’Evercoast pour enregistrer les performances réelles en 3D, puis le rendu en postproduction a été effectué avec Houdini et OctaneRender
- GSOPs de CG Nomads et les outils internes de WildCapture ont servi à gérer le séquençage des données de splat, le relighting et les interactions physiques
- Malgré l’aspect surréaliste de la vidéo, toutes les scènes ont été produites à partir de performances physiques réelles d’acteurs
- Ce projet constitue un cas d’usage concret du Gaussian Splatting dynamique dans un clip de musique grand public, et montre le potentiel de la production vidéo 3D en temps réel à l’avenir
Aperçu de la production du clip « Helicopter »
- « Helicopter » d’A$AP Rocky est un clip utilisant la technologie des Radiance Fields, dans lequel presque toutes les performances des personnages ont été capturées de manière volumétrique
- La vidéo se distingue par des mouvements chaotiques et une énergie rappelant le style des débuts de MTV
- Les personnages sont rendus sous forme de Dynamic Splats, créant une véritable sensation de profondeur spatiale
- Le projet a réuni Evercoast, Grin Machine, WildCapture, Fitsū.ai et d’autres partenaires
- Evercoast s’est chargé de la capture de performance, tandis que Chris Rutledge de Grin Machine a participé comme superviseur CG
- Wilfred Driscoll de WildCapture a apporté un soutien technique pour la cohérence temporelle et le transfert de mouvement
Capture volumétrique et configuration technique
- Le tournage a eu lieu à Los Angeles en août 2025, avec 56 caméras RGB-D d’Evercoast et deux stations de travail Dell synchronisées
- Les acteurs étaient suspendus à des câbles ou accrochés à une barre au plafond pour effectuer des cascades physiques
- Les pales d’hélicoptère et certains accessoires ont été remplacés par de véritables structures en bois afin de tourner dans un environnement réaliste
- Au total, 10 To de données brutes ont été collectés, puis transformés en environ 30 minutes de vidéo en splats
- Le résultat final a été exporté sous forme de séquences PLY d’environ 1 To
Pipeline de postproduction
- La postproduction a été réalisée dans Houdini, avec GSOPs de CG Nomads pour manipuler et séquencer les données de splat
- OctaneRender d’OTOY a été utilisé pour le rendu final et a permis le relighting
- L’intégration d’Octane à Houdini est désormais suffisamment mature pour permettre de restituer les ombres et la profondeur
- Blender a été utilisé aux étapes de layout et de prévisualisation
- Les séquences de splats ont été converties en caches proxy légers pour planifier les scènes
- Les outils internes de WildCapture ont généré des squelettes d’estimation de pose, utiles pour les collisions et simulations physiques
Prévisualisation en temps réel et efficacité de production
- Le système d’Evercoast fournit un retour spatial en temps réel sur le plateau
- Le réalisateur peut consulter un aperçu basé sur des meshes juste après le tournage, puis examiner le rendu splat complet via un lecteur web
- Avant de télécharger les données volumineuses, seules les scènes nécessaires sont sélectionnées pour la postproduction
- Ce workflow, plus proche de la simulation que de la production vidéo traditionnelle, permet une création rapide et économique
Performance réelle et illusion visuelle
- Certains spectateurs ont cru que la vidéo était générée par IA, mais toutes les scènes reposent sur des performances physiques réelles d’acteurs
- Cascades, sauts et chutes ont tous été exécutés dans un espace réel
- Grâce à la capture volumétrique, il est possible de recomposer librement les cadrages et de briser la continuité spatiale, ce qui produit une impression artificielle
- La technologie des Radiance Fields ne remplace pas la réalité ; elle sert à préserver les mouvements et l’espace du réel
Collaborations précédentes entre A$AP Rocky et les Radiance Fields
- A$AP Rocky avait déjà utilisé NeRF et Instant-NGP GUI dans le clip de « Shittin’ Me » en 2023
- « Helicopter » est considéré dans cette continuité comme un exemple de grande ampleur d’usage concret du Gaussian Splatting dynamique
Aucun commentaire pour le moment.