La plataforma de IA de NVIDIA mejora la experiencia de aprendizaje de ASL

Darío Baruo

21 de febrero de 2025 15:53

NVIDIA colabora en una plataforma impulsada por la IA, Signs, para avanzar en el aprendizaje y desarrollo del lenguaje de señas americano, cerrando las brechas de comunicación entre las comunidades sordas y oyentes.

! La plataforma de IA de NVIDIA mejora la experiencia de aprendizaje de ASL

Los aprendices y desarrolladores de aplicaciones de IA basadas en ASL( están listos para beneficiarse de una nueva iniciativa liderada por NVIDIA, en colaboración con la American Society for Deaf Children y la agencia creativa Hello Monday. La plataforma Signs, impulsada por IA, tiene como objetivo apoyar la educación de ASL y fomentar el desarrollo de aplicaciones de IA accesibles, según NVIDIA.

Construcción de un conjunto de datos ASL integral

Signs ofrece una biblioteca validada de señas de ASL, lo que permite a los usuarios ampliar su vocabulario a través de un avatar 3D que demuestra las señas. La plataforma utiliza IA para analizar imágenes de la cámara web, brindando retroalimentación en tiempo real sobre las habilidades de señas de los usuarios. Esta iniciativa no solo ayuda a los aprendices, sino que también contribuye a un conjunto de datos de video de código abierto para ASL, con contribuciones de signantes de todos los niveles de habilidad.

El conjunto de datos, al que NVIDIA tiene como objetivo expandir a 400,000 videoclips que cubren 1,000 palabras firmadas, es validado por usuarios de ASL fluidos e intérpretes. Esto asegura la precisión y confiabilidad de los signos, creando un diccionario visual y herramienta de enseñanza de alta calidad. Cheri Dowling, directora ejecutiva de la Sociedad Americana para Niños Sordos, enfatizó la importancia de tales herramientas para familias con niños sordos, señalando que el acceso temprano al ASL puede facilitar la comunicación desde una edad temprana.

Innovaciones en el aprendizaje de ASL

Además de servir como plataforma de aprendizaje, el conjunto de datos de Señas está preparado para ser un recurso valioso para el desarrollo de aplicaciones de IA que conecten las brechas de comunicación entre las comunidades sordas y oyentes. Los datos estarán disponibles públicamente para la construcción de tecnologías accesibles, incluidos agentes de IA y herramientas de videoconferencia.

Actualmente, la plataforma se centra en los movimientos de las manos y las posiciones de los dedos, pero los desarrollos futuros apuntan a incorporar expresiones faciales y movimientos de cabeza, que son parte integral del ASL. Además, el equipo está explorando cómo se pueden integrar las variaciones regionales y los términos de la jerga para enriquecer la base de datos de ASL.

Esfuerzos de colaboración para mejorar la accesibilidad

Anders Jessen, socio fundador de Hello Monday/DEPT, destacó los esfuerzos continuos para mejorar la accesibilidad del ASL, con Signs sirviendo como una herramienta crucial para trascender las barreras de comunicación. La experiencia del usuario de la plataforma está siendo evaluada y mejorada en colaboración con investigadores del Centro de Investigación de Accesibilidad e Inclusión de la Rochester Institute of Technology.

Se espera que el conjunto de datos se publique más adelante este año, lo que proporcionará un recurso significativo para avanzar en la educación de ASL y el desarrollo de la tecnología. Los asistentes al próximo GTC de NVIDIA, una conferencia global de IA, tendrán la oportunidad de interactuar con la plataforma Signs en vivo.

Fuente de la imagen: Shutterstock