Entornos virtuales de próxima generación sinérgicos y realidades extendidas con agentes de inteligencia generativa

SYNERGIA tiene como objetivo abordar las limitaciones de los actuales sistemas de formación y apoyo virtuales, que siguen siendo rígidos, guionizados e incapaces de responder a las necesidades cognitivas, emocionales y de accesibilidad de usuarios diversos. Esta falta de adaptabilidad socava la seguridad, la inclusión y la confianza en ámbitos donde la interacción persona‑máquina es crítica, desde el ensamblaje industrial hasta la rehabilitación sanitaria y la colaboración humano‑robot.

El proyecto prevé la próxima generación de Inteligencia Artificial Generativa para mundos virtuales, combinando sensorización multimodal, creación de contenidos inmersivos y gobernanza explicable en un marco coherente para una interacción hiperpersonalizada y centrada en el ser humano.

Se basa en cuatro pilares clave:
i) modelos ligeros de inferencia multimodal que capturan señales faciales, vocales, gestuales y fisiológicas en tiempo real, desplegables en el edge con protección de la privacidad;
ii) asistentes generativos en 3D capaces de una interacción emocionalmente sensible, multilingüe y accesible, incluyendo gestos y lengua de signos;
iii) pipelines inmersivos que transforman texto, imágenes y vídeo en entornos 3D adaptativos con narrativas dinámicas y generación colaborativa de escenarios;
iv) un espacio de datos de aprendizaje conforme al RGPD que garantice la interoperabilidad, el control por parte del usuario, la explicabilidad y una gobernanza fiable.

SYNERGIA esta formado por  12 partners de 5 paises de la Unión Europea (Greece, France, Sweden, Spain, Italy),