Limbajul Semnelor American (ASL) este al treilea cel mai folosit limbaj în Statele Unite, însă există o lipsă semnificativă de instrumente AI dezvoltate cu date ASL comparativ cu resursele abundente pentru limbile predominante ale națiunii, engleză și spaniolă. Pentru a trece peste această lacună, NVIDIA, Societatea Americană pentru Copiii Surzi și agenția creativă Hello Monday s-au asociat pentru a crea Signs, o platformă web interactivă concepută pentru a facilita învățarea ASL și formarea de aplicații AI accesibile. Platforma oferă utilizatorilor o bibliotecă validată de semne ASL, permițându-le celor care învață limba să își îmbunătățească vocabularul cu ajutorul unui avatar 3D care ilustrează fiecare semn. În plus, dispune de un instrument AI care analizează înregistrările de pe webcam, oferind feedback în timp real asupra abilităților de semnare ale utilizatorilor. Persoanele de orice nivel de competență pot contribui semnând cuvinte specifice, ajutând la construirea unui set de date video open-source pentru ASL. NVIDIA își propune să extindă acest set de date la 400. 000 de clipuri video care să prezinte 1. 000 de cuvinte semnate, cu utilizatori fluenti de ASL și interpreți care să valideze fiecare semn pentru a garanta acuratețea. Acest lucru va crea un dicționar vizual de înaltă calitate și o resursă educațională. „Cei mai mulți copii surzi se nasc din părinți auzitori. Oferirea de instrumente accesibile precum Signs pentru membrii familiei pentru a începe să învețe ASL devreme le permite să stabilească comunicații eficiente cu copii de doar șase până la opt luni, ” a comentat Cheri Dowling, director executiv al Societății Americane pentru Copiii Surzi. „Cu tot vocabularul de pe platformă validat de educatori ASL profesioniști, utilizatorii pot avea încredere în ceea ce învață. ” NVIDIA intenționează să valorifice acest set de date pentru a avansa și mai mult aplicațiile AI care dezmembrează barierele de comunicare dintre comunitățile surde și cele auzitoare. Datele vor fi disponibile public ca o resursă pentru dezvoltarea tehnologiilor inclusive, cum ar fi agenții AI, aplicații digitale umane și instrumente de videoconferință.

De asemenea, ar putea fi utilizate pentru a îmbunătăți platforma Signs, oferind suport și feedback în timp real, bazat pe AI, pentru aplicațiile ASL din întregul ecosistem. **Îmbunătățirea Educației ASL și Abordarea Nuantelor Lingvistice** În timpul etapei sale de colectare a datelor, Signs servește deja ca o platformă robustă pentru dobândirea limbii ASL, oferind utilizatorilor ocazia de a învăța și practica un set esențial de 100 de semne care le îmbunătățesc abilitatea de a comunica cu prietenii sau membrii familiei care folosesc ASL. „Platforma de învățare Signs ar putea ajuta familiile cu copii surzi să caute rapid cuvinte specifice și să observe semnele asociate. Este un instrument practic pentru a îmbunătăți utilizarea zilnică a ASL în afara cursurilor formale, ” a declarat Dowling. „Îmi imaginez că atât copiii, cât și părinții o vor explora împreună și se vor distra. ” În timp ce Signs pune în prezent accent pe mișcările mâinilor și plasarea degetelor pentru fiecare semn, ASL include de asemenea expresii faciale și mișcări ale capului care transmit semnificație. Echipa din spatele Signs cercetează modul în care aceste semnale non-manuale pot fi observate și integrate în viitoare versiuni ale platformei. De asemenea, analizează metodele de a încorpora alte subtilități, cum ar fi variațiile regionale și argotul, în Signs, îmbogățind astfel baza de date ASL. Colaborând cu cercetători de la Institutul de Tehnologie din Rochester, la Centrul pentru Accesibilitate și Cercetare în Incluziune, își propun să evalueze și să îmbunătățească experiența utilizatorului pe platforma Signs pentru utilizatorii surzi și cu dificultăți de auz. „Îmbunătățirea accesibilității ASL este o efort constant, ” a spus Anders Jessen, partener fondator al Hello Monday/DEPT, care a dezvoltat platforma web Signs și a colaborat anterior cu Societatea Americană pentru Copiii Surzi la Fingerspelling. xyz, o aplicație care învață alfabetul ASL. „Signs este concepută pentru a satisface cererea pentru instrumente AI avansate care ajută la reducerea lacunelor de comunicare dintre comunitățile surde și cele auzitoare. ” Se așteaptă ca setul de date care susține Signs să fie lansat mai târziu în acest an.