Enhancing a virtual reality simulation with an AI-assisted interactive guide

Read full text
Authors: Joan Vila Orus
Cited by: 0

Abstract

Este TFG parte de un problema global: muchas aplicaciones de Realidad Virtual educativas (por ejemplo, de anatomía) son muy potentes para "ver" y explorar contenidos, pero a menudo se quedan cortas cuando el usuario necesita comprender de verdad lo que está observando (qué significa, por qué ocurre, qué implicaciones tiene) y no solo memorizar nombres o partes. Integrar un asistente dentro de VR parece una solución natural, pero en la práctica es difícil hacerlo bien: debe funcionar de forma estable en distintos proyectos, no depender de configuraciones frágiles, guiar al usuario sin romper la inmersión y ofrecer respuestas útiles sin generar confusión cuando hay latencia o cuando el sistema no está listo. Para resolverlo, el proyecto evolucionó desde una primera conexión simple de "pregunta¿respuesta" hacia un plugin reutilizable que se integra con pocos pasos, incorpora un avatar/robot que comunica el estado del sistema con señales claras para que la interacción sea intuitiva, y aprovecha el contexto de la escena (lo que el usuario está señalando o seleccionando) para que las respuestas sean más relevantes. Finalmente, se integró en una experiencia VR real y se validó con un test piloto con usuarios, confirmando que el enfoque ayuda a comprender mejor dentro del entorno inmersivo y señalando mejoras necesarias para reforzar la fiabilidad y reducir la latencia percibida.

Fields of Study & Subjects

Virtual Reality Applications and Impacts Augmented Reality Applications Intelligent Tutoring Systems and Adaptive Learning

Publication details

Journal / source
UPCommons institutional repository (Universitat Politècnica de Catalunya)
Publication date
20 January 2026
Language
ES
Document type
Thesis