Vicomtech participa en el proyecto europeo LUMINOUS, transformando la interacción en entornos XR mediante lenguaje natural
La iniciativa desarrolla una nueva generación de sistemas XR aumentados por modelos de lenguaje multimodales, con aplicaciones en neurorehabilitación, formación industrial y diseño arquitectónico.

26.05.2025
Vicomtech forma parte del consorcio europeo que lidera LUMINOUS (Language Augmentation for Humanverse), proyecto que busca transformar la forma en que las personas interactúan con entornos de realidad extendida (XR) mediante el uso de lenguaje natural y modelos de lenguaje multimodales (MLLM). El objetivo: crear sistemas XR capaces de adaptarse a usuarios y contextos no predefinidos, permitiendo una comunicación fluida con el entorno y el acceso instantáneo a fuentes de conocimiento actualizadas.
Vicomtech lidera el área de procesamiento de lenguaje natural (PLN) junto a HiTZ, dentro de un consorcio multidisciplinar compuesto por 12 socios de siete países europeos, entre ellos centros de investigación punteros, universidades y empresas tecnológicas. El proyecto, financiado por la Comisión Europea a través del programa Horizon Europe, combina disciplinas como inteligencia artificial, visión aumentada, gráficos por computador, neurorehabilitación y ética, con un enfoque centrado en el usuario.
El sistema propuesto por LUMINOUS utilizará interfaces de voz y avatares adaptables para asistir al usuario en la ejecución de tareas, ofreciendo ayudas visuales, instrucciones personalizadas y una interacción contextualizada. Además, se trabajará en la capacidad de los modelos para identificar y describir objetos no presentes en sus datos de entrenamiento, ampliando así sus posibilidades en entornos reales.
Los avances se validarán en tres pilotos:
- Neurorehabilitación, apoyando a pacientes con afasia post-ictus (liderado por MindMaze y UCL);
- Formación en seguridad industrial inmersiva (liderado por Ludus);
- Revisión de diseño arquitectónico en entornos BIM 3D (liderado por Mindesk).
Con este proyecto, Vicomtech refuerza su compromiso con el desarrollo de tecnologías avanzadas al servicio de las personas y se posiciona como referente en la aplicación del lenguaje natural en entornos inmersivos e inteligentes.