La llengua de signes americana (ASL) ocupa el tercer lloc com a llengua més utilitzada als Estats Units; tanmateix, hi ha una manca significativa d'eines d'IA desenvolupades amb dades d'ASL en comparació amb els abundants recursos per a les llengües predominants del país, l'anglès i el castellà. Per tancar aquesta bretxa, NVIDIA, l'American Society for Deaf Children i l'agència creativa Hello Monday s'han associat per crear Signs, una plataforma web interactiva dissenyada per facilitar l'aprenentatge d'ASL i la creació d'aplicacions d'IA accessibles. La plataforma ofereix als usuaris una biblioteca validada de signes d'ASL, que permet als aprenents de la llengua millorar el seu vocabulari amb l'ajuda d'un avatar 3D que il·lustra cada signe. A més, compta amb una eina d'IA que analitza gravacions de càmeres web, proporcionant retroalimentació en temps real sobre les habilitats de signe dels usuaris. Les persones de qualsevol nivell de competència poden contribuir signant paraules concretes, ajudant a construir un conjunt de dades de vídeo de codi obert per a l'ASL. NVIDIA té com a objectiu expandir aquest conjunt de dades a 400. 000 clips de vídeo que mostrin 1. 000 paraules signades, amb usuaris d'ASL fluides i intèrprets que validin cada signe per garantir la seva precisió. Això donarà lloc a un diccionari visual d'alta qualitat i un recurs didàctic. "La majoria dels nens i nenes sordes neixen de pares oients. Proporcionar eines accessibles com Signs perquè els membres de la família comencin a aprendre ASL des de ben aviat els permet establir una comunicació efectiva amb nens tan joves com de sis a vuit mesos”, va comentar Cheri Dowling, directora executiva de l'American Society for Deaf Children. "Amb tot el vocabulari de la plataforma validat per educadors professionals d'ASL, els usuaris poden confiar en el que estan aprenent. " NVIDIA pretén aprofitar aquest conjunt de dades per avançar en aplicacions d'IA que desmantellin les barreres de comunicació entre les comunitats sords i oients. Les dades es faran públiques com a recurs per al desenvolupament de tecnologies inclusives, com agents d'IA, aplicacions humanes digitals i eines de videoconferència.

També pot ser utilitzat per millorar la plataforma Signs, proporcionant suport i retroalimentació en temps real, impulsats per IA, per a aplicacions d'ASL en tot l'ecosistema. **Millorar l'educació d'ASL i abordar la nuança lingüística** Durant la seva fase de recollida de dades, Signs ja serveix com una plataforma robusta per a l'adquisició de la llengua ASL, donant als usuaris l'oportunitat d'aprendre i practicar un conjunt essencial de 100 signes que milloren la seva capacitat per comunicar-se amb amics o familiars que utilitzin ASL. "La plataforma d'aprenentatge Signs podria ajudar les famílies amb nens i nenes sords a cercar ràpidament paraules específiques i observar els signes associats. És una eina pràctica per millorar l'ús quotidià d'ASL fora de les classes formals”, va declarar Dowling. "Veig tant nens com pares explorant-la junts i divertint-se. " Mentre que Signs actualment posa l'accent en els moviments de mans i col·locacions de dits per a cada signe, l'ASL també inclou expressions facials i moviments del cap que transmeten significat. L'equip darrere de Signs està investigant com aquests senyals no manuals poden ser observats i integrats en diverses iteracions futures de la plataforma. També estan examinant mètodes per incorporar altres subtileses, com variacions regionals i argot, a Signs, enriquint així la seva base de dades d'ASL. Col·laborant amb investigadors del Rochester Institute of Technology's Center for Accessibility and Inclusion Research, tenen com a objectiu avaluar i millorar l'experiència d'usuari de la plataforma Signs per a usuaris sords i amb discapacitat auditiva. "Millorar l'accessibilitat d'ASL és un esforç continu", va dir Anders Jessen, soci fundador de Hello Monday/DEPT, que va desenvolupar la plataforma web Signs i que prèviament va col·laborar amb l'American Society for Deaf Children en Fingerspelling. xyz, una aplicació que ensenya l'alfabet d'ASL. "Signs està dissenyat per satisfer la demanda d'eines d'IA avançades que ajuden a tancar les bretxes de comunicació entre les comunitats sords i oients. " Se espera que el conjunt de dades que dona suport a Signs es publiqui més endavant aquest any.