Objetivos del proyecto
Objetivo General
Diseñar, desarrollar y validar un sistema de comunicación aumentativa accesible, portátil y de bajo coste que, mediante la integración de eye tracking, realidad aumentada, inteligencia artificial y reconocimiento emocional, mejore la velocidad, la fluidez y la experiencia de comunicación de personas con movilidad reducida severa, especialmente en entornos educativos.
Objetivos específicos
Desarrollar un algoritmo de detección de pupila en tiempo real usando visión por computador (OpenCV) y una cámara de infrarrojos integrada en la montura 3D de las gafas XReal One.
Diseñar un teclado virtual optimizado para el español que reduzca el recorrido ocular respecto al teclado QWERTY estándar.
Implementar un sistema de predicción de frases completas basado en un LLM que utilice el contexto real de la conversación en curso.
Integrar el estado emocional del usuario —obtenido con el sensor Shimmer3R— como variable de contexto en el sistema de predicción de la IA.
Desarrollar un módulo de síntesis y clonación de voz personalizada para que el sistema reproduzca en voz alta las frases seleccionadas.
Implementar indicadores LED (estado 'escribiendo' y estado emocional) para mejorar la comunicación con los interlocutores.
Crear una montura impresa en 3D para las gafas XReal One que integre todos los componentes electrónicos de forma ergonómica.
Validar el sistema mediante pruebas cuantitativas y cualitativas que permitan contrastar las hipótesis planteadas.
Contribuir al desarrollo de competencias de investigación e innovación en el alumnado del ciclo DAM.