Pixal3DGénérateur d'image en 3D qui soulève les caractéristiques de pixels dans un volume de caractéristiques 3D pour des objets GLB compatibles avec la vue constante et la PBR

Pixal3D est un outil de génération d'images à 3D qui convertit des images 2D à une ou plusieurs vues en assets 3D texturés exportables au format GLB. Il est issu de recherches menées par des groupes de l'Université Tsinghua et de TencentARC, et le projet est positionné autour d'une contribution académique acceptée à SIGGRAPH 2026. Le code est publié sur GitHub avec des modèles hébergés sur Hugging Face, et une démonstration web hébergée permet aux utilisateurs de l'essayer sans configuration locale. L'affirmation centrale de l'outil est qu'il aborde le problème de la correspondance 2D-3D différemment de nombreux générateurs 3D natifs. Plutôt que de prédire une forme dans une pose canonique générique en utilisant une attention lâche, Pixal3D utilise un schéma de "rétro-projection pixel" explicite qui élève les caractéristiques d'image 2D multi-échelles dans un volume de caractéristiques 3D. Le résultat attendu est une sortie cohérente avec la vue où le devant généré correspond étroitement à l'image d'entrée, en préservant les proportions, les silhouettes et les détails fins au lieu de produire un modèle plausible mais inventé. La génération est construite sur la base Trellis.2, que le projet crédite pour la vitesse d'inférence et la qualité d'extraction de fonctionnalités. Les sorties sont des maillages équipés de matériaux Physically Based Rendering - carte de couleur de base, normale et rugosité - de sorte que les assets peuvent être intégrés dans des moteurs tels que Unity et Unreal, ou dans Blender, sans travail manuel de UV ou de peinture de texture. La chaîne de traitement peut être appliquée à une seule image ou à plusieurs vues : avec plusieurs angles, elle agrège des fonctionnalités rétro-projetées pour améliorer la cohérence à 360 degrés et remplir les régions occultées, ce qui convient aux feuilles de turnaround de personnages. Au-delà des éléments isolés, Pixal3D propose un pipeline modulaire capable d'analyser des images complexes en scènes 3D séparées par objets, visant une prototypage rapide d'environnement plutôt que la génération d'objets uniques. Les utilisateurs ciblés sont les artistes techniques et 3D, les développeurs de jeux et les créateurs d'informatique spatiale qui ont besoin de sorties qui correspondent fidèlement à l'art de référence ou au concept. En tant que projet open-source soutenu par la recherche, le principal différentiateur de Pixal3D est la fidélité à la vue d'entrée plutôt que la variété créative brute - un accent qui entre en concurrence avec des outils tels que Meshy, Tripo, Rodin et Trellis lui-même. Les utilisateurs potentiels doivent évaluer que ses meilleurs résultats se concentrent sur la correspondance d'une image donnée et que, en tant que version de recherche relativement nouvelle, la robustesse dans le monde réel sur des entrées diverses, une géométrie occultée et une synthèse de scène complète est mieux vérifiée par rapport à vos propres actifs. Les conditions de tarification, de limites d'utilisation et de licence commerciale spécifiques ne sont pas détaillées dans la documentation disponible.