Dans le cadre du développement d’expériences immersives en réalité augmentée à 360°, le stage vise à concevoir et prototyper une solution capable d’estimer et de suivre en temps réel la pose 6D d’un objet réel unique dans l’environnement.
Le défi principal consiste à assurer une détection robuste, un alignement stable et précis entre objet réel et modèle virtuel, et une expérience fluide sur dispositifs mobiles (iOS/Android).
Missions
Le ou la stagiaire participera aux différentes étapes de recherche, conception et développement d’un pipeline complet d’estimation et de suivi 6D intégré à Unity, incluant :
1. Développement du système d’estimation 6D
- Implémentation de méthodes d’estimation de pose (vision par ordinateur, réseaux profonds ou approches hybrides).
- Exploration de techniques avancées telles que render-and-compare, suivi visuel ou architectures multi-modalités.
2. Suivi temps réel et stabilité
- Optimisation du suivi continu sur mobile.
- Gestion de la stabilité du rendu malgré les perturbations (mouvements rapides, variations de lumière, occlusions partielles).
3. Intégration Unity
- Intégration de la solution dans Unity avec compatibilité ARFoundation (même limitée).
- Test et déploiement sur terminaux iOS et Android.
- Prise en charge de sources de données :
o caméra RGB,
o profondeur (optionnelle),
o capteurs LiDAR (le cas échéant).
4. Analyse et évaluation
- Documentation technique et capitalisation des résultats.