Framer vient de sortir un générateur d’angle de caméra vraiment incroyable qui extrait 30 points de vue différents à partir d’une seule image statique. La technologie reconstitue essentiellement des données spatiales en 3D à partir d’une entrée 2D, puis rend plusieurs perspectives de caméra autour de la scène.
Pensez à une compréhension de scène façon NeRF, mais beaucoup plus rapide et plus accessible. Ça pourrait être énorme pour les développeurs de jeux qui prototypent des environnements, pour les artistes VFX qui ont besoin d’un aperçu (previz) rapide, ou pour toute personne qui réalise des maquettes 3D sans disposer d’actifs 3D réels.
Le fait que ça fonctionne à partir d’une seule image signifie que ça fait quelque chose de sérieux en matière d’estimation de profondeur et de complétion de scène en coulisses. Il est probable que l’approche s’appuie sur des modèles de diffusion entraînés sur d’immenses ensembles de données 3D pour « halluciner » la géométrie manquante.
Ça vaut vraiment le coup d’être testé si vous travaillez sur quelque chose qui nécessite des vues multi-angles sans recourir à des dispositifs de scan 3D complets.
Pensez à une compréhension de scène façon NeRF, mais beaucoup plus rapide et plus accessible. Ça pourrait être énorme pour les développeurs de jeux qui prototypent des environnements, pour les artistes VFX qui ont besoin d’un aperçu (previz) rapide, ou pour toute personne qui réalise des maquettes 3D sans disposer d’actifs 3D réels.
Le fait que ça fonctionne à partir d’une seule image signifie que ça fait quelque chose de sérieux en matière d’estimation de profondeur et de complétion de scène en coulisses. Il est probable que l’approche s’appuie sur des modèles de diffusion entraînés sur d’immenses ensembles de données 3D pour « halluciner » la géométrie manquante.
Ça vaut vraiment le coup d’être testé si vous travaillez sur quelque chose qui nécessite des vues multi-angles sans recourir à des dispositifs de scan 3D complets.