Bahasa Isyarat Amerika (ASL) menduduki peringkat sebagai bahasa yang paling banyak digunakan ketiga di Amerika Serikat, namun terdapat kekurangan signifikan alat AI yang dikembangkan dengan data ASL dibandingkan dengan sumber daya melimpah untuk bahasa dominan negara itu, yaitu Inggris dan Spanyol. Untuk menjembatani kesenjangan ini, NVIDIA, American Society for Deaf Children, dan agensi kreatif Hello Monday telah bermitra untuk menciptakan Signs, sebuah platform web interaktif yang dirancang untuk memfasilitasi pembelajaran ASL dan pembentukan aplikasi AI yang dapat diakses. Platform ini menawarkan pengguna perpustakaan tanda ASL yang sudah tervalidasi, memungkinkan pelajar bahasa untuk meningkatkan kosakata mereka dengan bantuan avatar 3D yang menggambarkan setiap tanda. Selain itu, platform ini dilengkapi alat AI yang menganalisis rekaman webcam, memberikan umpan balik waktu nyata tentang keterampilan tanda pengguna. Individu dengan tingkat kemampuan apa pun dapat berkontribusi dengan menandakan kata-kata tertentu, membantu membangun dataset video sumber terbuka untuk ASL. NVIDIA bertujuan untuk memperluas dataset ini menjadi 400. 000 klip video yang menampilkan 1. 000 kata yang ditandai, dengan pengguna ASL yang fasih dan penerjemah memvalidasi setiap tanda untuk menjamin akurasi. Ini akan menciptakan kamus visual dan sumber ajar berkualitas tinggi. "Sebagian besar anak tuna rungu lahir dari orang tua yang mendengarkan. Menyediakan alat yang dapat diakses seperti Signs untuk anggota keluarga agar dapat mulai belajar ASL lebih awal memungkinkan mereka menjalin komunikasi yang efektif dengan anak-anak berusia enam hingga delapan bulan, " komentar Cheri Dowling, direktur eksekutif American Society for Deaf Children. "Dengan semua kosakata di platform yang tervalidasi oleh pendidik ASL profesional, pengguna dapat mempercayai apa yang mereka pelajari. " NVIDIA bermaksud memanfaatkan dataset ini untuk lebih meningkatkan aplikasi AI yang menghancurkan batasan komunikasi antara komunitas tuna rungu dan yang mendengarkan. Data ini akan tersedia secara publik sebagai sumber untuk mengembangkan teknologi inklusif, seperti agen AI, aplikasi manusia digital, dan alat konferensi video.

Ini juga dapat digunakan untuk meningkatkan platform Signs, memberikan dukungan dan umpan balik AI secara real-time untuk aplikasi ASL di seluruh ekosistem. **Meningkatkan Pendidikan ASL dan Mengatasi Nuansa Bahasa** Selama fase pengumpulan data, Signs sudah berfungsi sebagai platform yang solid untuk akuisisi bahasa ASL, memberikan pengguna kesempatan untuk belajar dan mempraktikkan seperangkat tanda penting sebanyak 100 tanda yang meningkatkan kemampuan mereka untuk berkomunikasi dengan teman atau anggota keluarga yang menggunakan ASL. "Platform pembelajaran Signs dapat membantu keluarga dengan anak tuna rungu dalam mencari kata-kata tertentu dengan cepat dan mengamati tanda-tanda terkait. Ini adalah alat praktis untuk meningkatkan penggunaan sehari-hari ASL mereka di luar kelas formal, " kata Dowling. "Saya membayangkan anak-anak dan orang tua menjelajahinya bersama-sama dan bersenang-senang. " Swhile Signs saat ini menekankan gerakan tangan dan penempatan jari untuk setiap tanda, ASL juga mencakup ekspresi wajah dan gerakan kepala yang menyampaikan makna. Tim di balik Signs sedang mencari cara untuk mengamati dan mengintegrasikan sinyal non-manual ini ke dalam iterasi mendatang dari platform. Mereka juga sedang memeriksa metode untuk menggabungkan nuansa lain, seperti variasi regional dan slang, ke dalam Signs, sehingga memperkaya database ASL-nya. Bekerjasama dengan peneliti di Center for Accessibility and Inclusion Research di Rochester Institute of Technology, mereka bertujuan untuk mengevaluasi dan meningkatkan pengalaman pengguna dari platform Signs untuk pengguna tuna rungu dan sulit mendengar. “Meningkatkan aksesibilitas ASL adalah upaya yang berkelanjutan, ” kata Anders Jessen, salah satu pendiri Hello Monday/DEPT, yang mengembangkan platform web Signs dan sebelumnya bekerja sama dengan American Society for Deaf Children pada Fingerspelling. xyz, sebuah aplikasi yang mengajarkan alfabet ASL. "Signs dirancang untuk memenuhi permintaan terhadap alat AI canggih yang membantu menjembatani kesenjangan komunikasi antara komunitas tuna rungu dan yang mendengarkan. " Dataset yang mendukung Signs diharapkan akan dirilis nanti tahun ini.