HN en accès libre : expérience immersive en Gaussian Splat de la Sutro Tower à San Francisco
(vincentwoo.com)- Il est possible d’explorer en 3D sur le web Sutro Tower, structure emblématique de San Francisco, et sur mobile de parcourir la scène comme si l’on s’y promenait grâce au mode AR
- La création de la scène s’appuie sur le Gaussian Splatting, avec un pipeline allant de la capture par drone à l’alignement dans RealityCapture, l’entraînement avec gsplat, la compression avec SOGS et le rendu avec PlayCanvas
- Les commandes à la souris, au toucher et au clavier sont toutes prises en charge, ce qui permet de se déplacer librement autour de la tour avec Orbit, Pan, Look, Zoom, Fly, le réglage de vitesse et la réinitialisation de la caméra
- La jambe ouest abrite un ascenseur intérieur, dans lequel deux personnes peuvent prendre place de façon un peu inconfortable, et le trajet complet dure 8 minutes
- Haute de 977 pieds, Sutro Tower est plus basse que Salesforce Tower, mais comme sa base se situe à 834 pieds d’altitude, elle donne une impression de hauteur supérieure dans les vues sur San Francisco
Scène 3D de Sutro Tower visible sur le web
- Le modèle 3D de Sutro Tower à San Francisco peut être exploré librement dans le navigateur
- Sur mobile, une petite icône en forme de cube permet d’activer le mode AR
- L’utilisateur peut se déplacer lui-même et bouger son téléphone pour observer la scène
- Des informations plus détaillées sur la tour sont disponibles dans la visite numérique officielle
Pipeline de production en Gaussian Splatting et commandes
- La scène a été réalisée sur la base de Gaussian Splatting, qui a récemment beaucoup progressé
- La scène a été capturée par drone
- Alignement avec RealityCapture
- Entraînement avec gsplat
- Compression avec SOGS
- Rendu avec PlayCanvas
- Les commandes de navigation prennent en charge à la fois le desktop et les entrées tactiles
- Orbit : bouton gauche de la souris ou glisser tactile
- Pan : bouton du milieu de la souris ou balayage
- Look : bouton droit de la souris
- Zoom : molette de la souris ou pincement
- Fly : WASD ou flèches directionnelles
- Vol plus rapide : Shift
- Vol plus lent : Ctrl
- Réinitialiser la caméra : R
Intérieur de la tour et caractéristiques structurelles
- La jambe ouest de Sutro Tower comporte un ascenseur intérieur
- Deux personnes peuvent y entrer, de manière assez inconfortable
- Lorsque l’ascenseur passe la partie médiane de la tour, il passe d’une inclinaison vers l’avant à une inclinaison vers l’arrière, ce qui peut provoquer une légère désorientation chez les passagers
- Le trajet complet dure 8 minutes
- La structure de la tour a été conçue par Albert C. Martin & Associates of Los Angeles et fabriquée et érigée par Kline Iron and Steels
- Sa hauteur est de 977 pieds
- Sa base se situe à 834 pieds d’altitude
- Les trois jambes sont ancrées dans 15 millions de livres de ciment
- 3,5 millions de livres d’acier ont été utilisées pour la tour
- Pour la sécurité sismique, le véritable centre de gravité se situe sous terre, et la tour est conçue pour se tordre légèrement par vents forts
- Salesforce Tower culmine à 1070 pieds, soit un peu plus haut que Sutro Tower
- Sutro Tower se trouvant à 834 pieds d’altitude, elle conserve l’avantage dans les vues plongeantes sur la ville
1 commentaires
Commentaires sur Hacker News
La carte de Vienne, en particulier, regorge vraiment de lieux intéressants
[1] https://en.wikipedia.org/wiki/BBC_Domesday_Project
Pour l’actualité de Gaussian Splatting, https://radiancefields.com/ couvre en continu beaucoup d’avancées
Le 5 mars, une réunion publique accueillera des intervenants de Niantic et Cesium : https://metaverse-standards.org/event/gaussian-splats-town-h...
Les précédentes réunions publiques sur les splats et les présentations associées se trouvent sur la page des vidéos, et il y a quelques jours Adobe a également fait une présentation sur le Gaussian Splatting : https://metaverse-standards.org/presentations-videos/
J’ai commencé par prendre de nombreuses photos larges, puis des séries en grille qui se chevauchaient à différents niveaux de zoom. Si Photosynth existait encore, j’aimerais revoir le résultat
[0] https://en.wikipedia.org/wiki/Photosynth
J’ai été surpris de voir beaucoup plus de détails en mode VR, et avant d’y passer je n’avais pas trouvé l’easter egg
J’aurais dû être assis au départ : le framerate était faible et l’horizon était mal orienté, si bien que j’ai failli tomber en me déplaçant vers le canapé. Cela aurait pu être dangereux si je n’avais pas décidé de me fier entièrement à ma proprioception
Par rapport à Inside the Scaniverse, à la résolution beaucoup trop faible, ou à Horizon Worlds, plat et gênant, c’est clairement une réussite. Il faudra que je réessaie en mode tethering