OVA coordonne un tout nouveau projet de recherche qui vise à révolutionner la formation industrielle en VR en combinant la technologie de NeRF (champ de radiance neuronale) aux méthodes traditionnelles de génération de contenu 3D. Ce projet de 790.000€, mené en collaboration avec Fraunhofer IIS et DGG (Darmstadt Graphics Group GmbH), est financé par le Conseil national de recherches Canada (CNRC), le réseau d’innovation XR Interaction et le ministère allemand pour les affaires économiques et l'action climatique (dans le cadre du programme Innovation Centrale pour les petites et moyennes entreprises (ZIM)).
Ce projet est né d’un pont initial entre StellarX et RapidPipeline, le logiciel d’optimisation 3D de DGG, qui permet d’optimiser les maillages et de les convertir en divers formats. L’exploration des NeRFs et des gaussian splats par OVA a mené à l’ajout du partenaire Fraunhofer puis, enfin, à l’élaboration d’un projet de R&D à part entière avec le soutien du PARI CNRC.
Le but premier de ce projet germano-canadien est d’élaborer un processus permettant aux utilisateurs de capturer des images avec un appareil simple, tel qu’une caméra de téléphone intelligent, de les convertir en maillages 3D, en NeRFs ou potentiellement en gaussian splats, puis de les importer dans des environnements immersifs. Les objectifs à l’horizon comprennent le développement d’interfaces pour une conversion NeRF à mesh sans heurt, l’optimisation de simulations et d’environnements VR en temps réel ainsi que l’atteinte d’une performance satisfaisante sur de l’équipement VR.
Cette technologie serait particulièrement utile pour les cas d’utilisation nécessitant des modèles 3D spécialisés (tels que du matériel industriel, par exemple) ne pouvant pas être trouvés en ligne. En automatisant la capture et la modélisation d’objets et d’environnements réalistes et détaillés, on élimine le processus long et coûteux qu’implique la création d’objets personnalisés. Le contenu 3D de haute qualité devient plus accessible, ce qui améliore considérablement l’efficacité, le réalisme et l’utilité des scénarios de formation immersifs pour les applications industrielles.
Nous sommes ravis d’être à la tête de ce projet de R&D, et espérons pouvoir intégrer ses développements à StellarX.
.png){kind=small}