Universidade de Vigo

Comprensión de la lengua de signos con aprendizaje profundo

Año: 2025

Investigador principal: José Luis Alba Castro; Laura Docío Fernández

Fuente financiación: Ministerio de Ciencia, Innovación y Universidades, Proyectos de generación de conocimiento

Período: 01/09/2025 - 31/12/2028

ID: PID2024-157855OB-C31

DESIGN tiene como objetivo desarrollar una representación matemática de la Lengua de Signos Española (LSE) que permita mejorar su comprensión automática y traducción mediante técnicas de inteligencia artificial. El proyecto desarrollará modelos avanzados capaces de interpretar el significado de los mensajes en su contexto, integrando grandes modelos de lenguaje (LLMs) y modelos visión-lenguaje (VLMs). Sus resultados se validarán en tres casos de uso: traducción en entornos médico-paciente, gestión de citas médicas y evaluación del aprendizaje de la LSE. Además, DESIGN impulsará nuevas técnicas de anotación automática y desarrollará un reconocedor de al menos 2.000 signos que servirá como base para futuros sistemas de reconocimiento y traducción.