A plataforma de IA da NVIDIA melhora a experiência de aprendizagem de Língua Gestual Americana

Dario Baruo

21 de fevereiro de 2025 15:53

A NVIDIA colabora numa plataforma impulsionada por IA, Signs, para avançar na aprendizagem e desenvolvimento da Língua Gestual Americana, aproximando as lacunas de comunicação entre as comunidades surdas e ouvintes.

A plataforma de IA da NVIDIA melhora a experiência de aprendizagem de Língua Gestual Americana (ASL)!

Os aprendizes e desenvolvedores de aplicativos de IA baseados em ASL( estão preparados para beneficiar de uma nova iniciativa liderada pela NVIDIA, em colaboração com a American Society for Deaf Children e a agência criativa Hello Monday. A plataforma Signs, alimentada por IA, tem como objetivo apoiar a educação ASL e fomentar o desenvolvimento de aplicativos de IA acessíveis, de acordo com a NVIDIA.

Construção de um Conjunto de Dados de ASL Abrangente

O Signs oferece uma biblioteca validada de sinais de ASL, permitindo aos usuários expandir seu vocabulário através de um avatar 3D que demonstra sinais. A plataforma utiliza a IA para analisar imagens da webcam, fornecendo feedback em tempo real sobre as habilidades de sinalização dos usuários. Esta iniciativa não só ajuda os aprendizes, mas também contribui para um conjunto de dados de vídeo de código aberto para ASL, com contribuições de sinalizadores de todos os níveis de habilidade.

O conjunto de dados, que a NVIDIA visa expandir para 400.000 videoclipes cobrindo 1.000 palavras sinalizadas, é validado por usuários fluentes de ASL e intérpretes. Isso garante a precisão e confiabilidade dos sinais, criando um dicionário visual e ferramenta de ensino de alta qualidade. Cheri Dowling, diretora executiva da Sociedade Americana de Crianças Surdas, enfatizou a importância de tais ferramentas para famílias com crianças surdas, observando que o acesso precoce ao ASL pode facilitar a comunicação desde tenra idade.

Inovações na Aprendizagem de ASL

Além de servir como uma plataforma de aprendizagem, o conjunto de dados Signs está pronto para ser um recurso valioso para o desenvolvimento de aplicações de IA que preencham as lacunas de comunicação entre as comunidades surdas e ouvintes. Os dados estarão publicamente disponíveis para construir tecnologias acessíveis, incluindo agentes de IA e ferramentas de videoconferência.

A plataforma atualmente se concentra em movimentos das mãos e posições dos dedos, mas os desenvolvimentos futuros visam incorporar expressões faciais e movimentos da cabeça, que são fundamentais para a ASL. Além disso, a equipe está explorando como variações regionais e gírias podem ser integradas para enriquecer o banco de dados da ASL.

Esforços colaborativos para melhorar a acessibilidade

Anders Jessen, sócio fundador da Hello Monday/DEPT, destacou os esforços contínuos para melhorar a acessibilidade da Língua Gestual Americana (ASL), com os sinais a servirem como uma ferramenta crucial para transcender as barreiras de comunicação. A experiência do utilizador da plataforma está a ser avaliada e melhorada em colaboração com investigadores do Centro de Investigação para Acessibilidade e Inclusão da Rochester Institute of Technology.

Espera-se que o conjunto de dados seja lançado ainda este ano, fornecendo um recurso significativo para o avanço da educação em ASL e desenvolvimento de tecnologia. Os participantes do próximo NVIDIA GTC, uma conferência global de IA, terão a oportunidade de interagir com a plataforma Signs ao vivo.

Fonte da imagem: Shutterstock