Deep Learning methods to improve 3D Gaussian Splatting training H/F

Description de l'offre : Rejoignez-nous en Stage !  CEA Tech Corporate from CEA Tech on Vimeo. En tant que stagiaire au CEA, vous aurez l'opportunité de travailler au sein d'un environnement de recherche de renommée mondiale. Nos équipes sont composées d'experts passionnés et dédiés, offrant un cadre propice à l'apprentissage et à la collaboration. Vous aurez accès à des équipements de pointe et à des ressources de recherche de premier ordre pour mener à bien vos missions. Le sujet du Novel View Synthesis a connu ces dernières années des avancées remarquables grâce à l’apparition des Neural Radiance Field puis des 3D Gaussian Splatting. Notre laboratoire a ainsi développé un outil de visualisation et d’interaction en Réalité Virtuelle sur les plateformes Unity3D et UnrealEngine basé sur cette dernière approche qui a rencontré un grand succès (https://www.youtube.com/watch?v=aZizVJ0TG4U). Il existe toujours des problèmes de reconstruction dans certaines parties des images, notamment dues aux réflexions (surfaces brillantes, miroirs) et aux zones uniformes (murs lisses, sols unis). Ces environnements difficiles peuvent entraîner des artefacts ou des zones floues, dégradant la qualité visuelle du rendu final. Des techniques comme la segmentation, l’inpainting multi-vues et les modèles de diffusion multi-vues  montrent un fort potentiel pour isoler et traiter ces problèmes. Ils pourraient nous permettre d’améliorer ou recréer ces zones mal reconstruites. Le sujet de ce stage consistera donc à explorer de telles techniques, évaluer leur efficacité et développer un prototype capable de détecter les zones à améliorer et appliquer les modèles adéquats de manière optimale.

Présentation de l’institut : Au cœur du Plateau de Saclay (Île-de-France), l’institut CEA LIST focalise ses recherches sur les systèmes numériques intelligents. Le Laboratoire de Simulation Interactive (LSI) développe une plateforme de simulation multi-physique interactive mettant en jeu un ou plusieurs utilisateurs en exploitant les technologies de Réalité Virtuelle (RV) et de Réalité Mixte (RM). Cette plateforme, dénommée XDE Physics, permet de simuler la manipulation et les interactions de l’ensemble des systèmes, pièces rigides, articulées ou déformables (câbles) directement sur les maquettes numériques. Elle permet également de valider des scénarios incluant l’opérateur pour étudier l’ergonomie du poste de travail par l’introduction de son avatar dans la simulation dynamique. Centrées sur les noyaux de simulation interactive, les activités de l’équipe vont jusqu’à la mise au point d’applicatifs, répondant aux contextes d’usage de ses partenaires industriels (manufacturing pour l’automobile et l’aéronautique, énergie, santé).

Profil du candidat : Qu’attendons-nous de vous ? Vous préparez un diplôme de niveau master 2 dans le domaine computer graphics et IA. Vous êtes passionné par la recherche scientifique et technologique. Vous possédez des connaissances en python, pytorch, cuda, c++, UE5 et/ou Unity3D.  Rejoignez-nous, venez développer vos compétences et en acquérir de nouvelles !  Vous avez encore un doute ? Nous vous proposons : L'opportunité de travailler au sein d'une organisation de renommée mondiale dans le domaine de la recherche scientifique, Un environnement unique dédié à des projets ambitieux au profit des grands enjeux sociétaux actuels, Une expérience à la pointe de l’innovation, comportant un fort potentiel de développement industriel, Des moyens expérimentaux exceptionnels et un encadrement de qualité, De réelles opportunités de carrière à l’issue de votre stage Un poste au cœur du plateau de Saclay, facilement accessible via la mobilité douce favorisée par le CEA, Une participation aux transports en commun à hauteur de 85%, Un équilibre vie privée – vie professionnelle reconnu, Un restaurant d'entreprise, Une politique diversité et inclusion, Conformément aux engagements pris par le CEA en faveur de l'intégration des personnes handicapées, cet emploi est ouvert à toutes et à tous. Le CEA propose des aménagements et/ou des possibilités d'organisation pour l'inclusion des travailleurs handicapés.

Diplome préparé : Bac+5 - Diplôme École d'ingénieurs

Langues : Anglais Intermédiaire