Miroir Magique : représentation virtuelle de la nouvelle apparence physique du patient oncologique après une chirurgie altérante du visage

Les patients atteints de cancer du visage subissant une ablation du nez font face à des défis psychologiques importants liés à la perte de leur identité visuelle. La méthode actuelle de création d'épithèses nasales est longue, coûteuse et intrusive, nécessitant plusieurs essais physiques. Ce mémoire présente le « Miroir Magique », une solution non invasive permettant aux patients de visualiser leur nouvelle apparence avec différentes épithèses virtuelles en temps réel. La méthode développée combine les technologies 3DDFA V3 pour générer une texture réaliste du nez et 3DDFA V2 pour la reconstruction faciale rapide. Le suivi robuste du visage est assuré par BlazeFace via MediaPipe, capable de détecter les visages sans nez. Les algorithmes de recalage 3D, utilisant l'Analyse en Composantes Principales (ACP) couplée à l'algorithme ICP, permettent un positionnement précis des modèles d'épithèse. Le filtre Minilag garantit la fluidité des mouvements sans retard perceptible. Les résultats expérimentaux démontrent une précision moyenne de placement de 9,70 pixels, une dérive inférieure à un pixel, et une latence moyenne de 23 ms respectant le seuil de confort pour les applications immersives. La robustesse du système a été validée sur des vidéos de visages avec et sans nez, respectant le critère de 95% du modèle d'épithèse dans la zone d'intérêt dans la majorité des cas. La vitesse de traitement actuelle (4,33 images par seconde) reste limitée, mais l'utilisation d'un processeur graphique permettrait d'atteindre les performances nécessaires au temps réel. Le « Miroir Magique » offre une méthode innovante et respectueuse pour accompagner les patients dans le choix de leur épithèse, s'intégrant naturellement dans le projet AUDACE et ouvrant la voie à une nouvelle approche de création d'épithèses faciales adaptée aux besoins médicaux modernes.