Platform AI NVIDIA Meningkatkan Pengalaman Belajar Bahasa Isyarat

Darius Baruo

21 Feb 2025 15:53

NVIDIA berkolaborasi pada platform berbasis AI, Signs, untuk memajukan pembelajaran dan pengembangan Bahasa Isyarat Amerika, menjembatani kesenjangan komunikasi antara komunitas tuli dan pendengar.

Pelajar Bahasa Isyarat Amerika (ASL) dan pengembang aplikasi AI berbasis ASL akan mendapat manfaat dari inisiatif baru yang dipimpin oleh NVIDIA, bekerja sama dengan American Society for Deaf Children dan agensi kreatif Hello Monday. Platform bertenaga AI, Signs, bertujuan untuk mendukung pendidikan ASL dan mendorong pengembangan aplikasi AI yang dapat diakses, menurut NVIDIA.

Membangun Dataset ASL yang Komprehensif

Tanda-tanda menawarkan perpustakaan tanda bahasa isyarat ASL yang divalidasi, memungkinkan pengguna untuk memperluas kosakata mereka melalui avatar 3D yang menunjukkan tanda. Platform ini menggunakan AI untuk menganalisis rekaman webcam, memberikan umpan balik waktu nyata tentang keterampilan berbahasa isyarat pengguna. Inisiatif ini tidak hanya membantu para pembelajar tetapi juga berkontribusi pada kumpulan data video open-source untuk ASL, dengan kontribusi dari penandatangan dari semua tingkat keterampilan.

Dataset, yang NVIDIA bertujuan untuk memperluas ke 400.000 klip video yang mencakup 1.000 kata yang ditandatangani, divalidasi oleh pengguna dan juru bahasa ASL yang fasih. Ini memastikan keakuratan dan keandalan tanda-tanda, membuat kamus visual dan alat pengajaran berkualitas tinggi. Cheri Dowling, direktur eksekutif American Society for Deaf Children, menekankan pentingnya alat-alat tersebut untuk keluarga dengan anak-anak tunarungu, mencatat bahwa akses awal ke ASL dapat memfasilitasi komunikasi sejak usia muda.

Inovasi dalam Pembelajaran Bahasa Isyarat Amerika

Selain berfungsi sebagai platform pembelajaran, kumpulan data Tanda-tanda siap menjadi sumber daya berharga untuk mengembangkan aplikasi AI yang menjembatani kesenjangan komunikasi antara komunitas tuli dan pendengar. Data akan tersedia secara publik untuk membangun teknologi yang dapat diakses, termasuk agen AI dan alat konferensi video.

Platform saat ini berfokus pada gerakan tangan dan posisi jari, namun pengembangan masa depan bertujuan untuk menggabungkan ekspresi wajah dan gerakan kepala, yang merupakan bagian integral dari ASL. Selain itu, tim sedang mengeksplorasi bagaimana variasi regional dan istilah slang dapat diintegrasikan untuk memperkaya basis data ASL.

Upaya Kolaboratif untuk Peningkatan Aksesibilitas

Anders Jessen, mitra pendiri Hello Monday/DEPT, menyoroti upaya terus-menerus untuk meningkatkan aksesibilitas ASL, dengan Tanda-tanda berfungsi sebagai alat penting untuk melampaui hambatan komunikasi. Pengalaman pengguna platform sedang dievaluasi dan ditingkatkan bekerja sama dengan para peneliti di Pusat Penelitian Aksesibilitas dan Inklusi Teknologi Rochester Institute.

Dataset diharapkan akan dirilis akhir tahun ini, menyediakan sumber daya yang signifikan untuk memajukan pendidikan ASL dan pengembangan teknologi. Peserta NVIDIA GTC mendatang, konferensi AI global, akan memiliki kesempatan untuk terlibat dengan platform Signs secara langsung.

Sumber gambar: Shutterstock