Američtina posunková (ASL) je tretím najpoužívanejším jazykom v Spojených štátoch, no oproti hojným zdrojom pre predominantné jazyky krajiny, angličtinu a španielčinu, existuje významný nedostatok AI nástrojov vyvinutých na základe dát ASL. Aby sa tento rozdiel prekonal, spoločnosti NVIDIA, Americká spoločnosť pre nepočujúce deti a kreatívna agentúra Hello Monday sa spojili na vytvorení platformy Signs, interaktívneho webového rozhrania navrhnutého na uľahčenie učenia ASL a vytvárania prístupných AI aplikácií. Platforma ponúka používateľom overenú knižnicu ASL znakov, ktorá umožňuje študentom jazyka rozšíriť si slovnú zásobu s pomocou 3D avatara, ktorý ilustruje každý znak. Okrem toho obsahuje nástroj AI, ktorý analyzuje nahrávky z webkamery a poskytuje spätnú väzbu o zručnostiach používateľa v signálnej reči v reálnom čase. Jednotlivci na akejkoľvek úrovni zručností môžu prispieť signovaním konkrétnych slov, čo pomôže vytvoriť open-source video databázu pre ASL. NVIDIA plánuje rozšíriť túto databázu na 400 000 video klipov, ktoré budú zobrazovať 1 000 signovaných slov, pričom plynulí používatelia ASL a tlmočníci overia každý znak, aby sa zabezpečila presnosť. To vytvorí kvalitný vizuálny slovník a učebný zdroj. „Väčšina nepočujúcich detí sa narodila rodičom, ktorí môžu počuť. Poskytovanie prístupných nástrojov ako Signs pre členov rodiny, aby mohli začať učiť ASL už od útleho veku, umožňuje nadviazať efektívnu komunikáciu s deťmi už od šiestich do ôsmich mesiacov, “ uviedla Cheri Dowling, výkonná riaditeľka Americkej spoločnosti pre nepočujúce deti. „Všetka slovná zásoba na platforme je overená profesionálnymi učiteľmi ASL, čo znamená, že používatelia môžu dôverovať tomu, čo sa učia. “ NVIDIA plánuje využiť túto databázu na ďalší pokrok v AI aplikáciách, ktoré odstraňujú komunikačné bariéry medzi nepočujúcimi a počujúcimi komunitami. Dáta budú sprístupnené verejnosti ako zdroj pre vývoj inkluzívnych technológií, ako sú AI agenti, digitálne aplikácie pre ľudí a nástroje na videokonferencie.

Môžu byť tiež využité na vylepšenie platformy Signs, čím sa poskytne okamžitá, AI podporovaná spätná väzba a podpora pre ASL aplikácie v celom ekosystéme. **Zlepšovanie vzdelávania ASL a riešenie jazykových nuáns** Počas fázy zberu dát platforma Signs už slúži ako robustný systém na osvojenie ASL jazyka, pričom ponúka používateľom možnosť učiť sa a precvičovať základnú sadu 100 znakov, čo zlepšuje ich schopnosť komunikovať s priateľmi alebo členmi rodiny, ktorí používajú ASL. „Platforma na učenie Signs by mohla pomôcť rodinám s nepočujúcimi deťmi rýchlo vyhľadávať konkrétne slová a pozorovať priľahlé znaky. Je to praktický nástroj na zlepšenie ich každodenného používania ASL mimo formálnych tried, “ vyhlásila Dowling. „Predstavujem si, ako deti aj rodičia túto platformu spoločne skúmajú a zabávajú sa. “ Zatiaľ čo platforma Signs aktuálne kladie dôraz na pohyby rúk a umiestnenie prstov pre každý znak, ASL tiež zahŕňa výrazy tváre a pohyby hlavy, ktoré vyjadrujú význam. Tím za Signs skúma, ako sa tieto nemanuálne signály dajú pozorovať a integrovať do budúcich verzií platformy. Taktiež skúmajú metódy na zahrnutie iných nuáns, ako sú regionálne variácie a slangu, do Signs, čím by sa obohatila databáza ASL. V spolupráci s výskumníkmi z RIT Center for Accessibility and Inclusion Research sa snažia hodnotiť a zlepšovať používateľský zážitok platformy Signs pre nepočujúcich a ťažko počujúcich používateľov. „Zlepšovanie prístupnosti ASL je neustálym úsilím, “ povedal Anders Jessen, zakladajúci partner Hello Monday/DEPT, ktorý vyvinul webovú platformu Signs a predtým spolupracoval s Americkou spoločnosťou pre nepočujúce deti na Fingerspelling. xyz, aplikácii na učenie sa ASL abecedy. „Signs je navrhnutá tak, aby vyhovela dopytu po pokročilých AI nástrojoch, ktoré pomáhajú preklenúť komunikačné medzery medzi nepočujúcimi a počujúcimi komunitami. “ Datasety podporujúce Signs sa očakávajú, že budú sprístupnené neskôr tento rok.