Amerikan viittomakieli (ASL) on Yhdysvalloissa kolmanneksi eniten käytetty kieli, mutta ASL-dataan perustuvia tekoälytyökaluja on huomattavasti vähemmän verrattuna maan hallitseviin kieliin, kuten englantiin ja espanjaan. Tämän kuilun ylittämiseksi NVIDIA, Amerikan kuurojen lasten yhdistys ja luova toimisto Hello Monday ovat tehneet yhteistyötä luodakseen Signs-nimisen interaktiivisen verkkopaketin, joka on suunniteltu helpottamaan ASL-opetusta ja saavutettavien tekoälysovellusten kehittämistä. Alustalla on käyttäjille validoitu kirjasto ASL-viittomista, mikä mahdollistaa kieltenoppijoille sanavaraston kehittämisen 3D-avattaren avulla, joka havainnollistaa jokaisen viittoman. Lisäksi siinä on tekoälytyökalu, joka analysoi web-kameran tallenteita ja antaa reaaliaikaista palautetta käyttäjien viittomataidoista. Kaiken tasoiset käyttäjät voivat osallistua viittomalla tiettyjä sanoja, auttaen keräämään avoimen lähdekoodin videodataa ASL:stä. NVIDIA aikoo laajentaa tätä datasettiä 400, 000 videoleikkeeseen, joissa esitellään 1, 000 viittomaa, ja sujuvat ASL-käyttäjät sekä tulkit vahvistavat jokaisen viittoman tarkan varmistamiseksi. Tämä luo korkealaatuisen visuaalisen sanakirjan ja opetustyökalun. “Useimmat kuurot lapset syntyvät kuuleville vanhemmille. Saamalla käytettäväksi työkaluja kuten Signs, perheenjäsenet voivat aloittaa ASL:n oppimisen varhain, mikä mahdollistaa tehokkaan viestinnän lasten kanssa, jotka ovat vasta kuusi- kahdeksan kuukautta vanhoja, ” totesi Cheri Dowling, Amerikan kuurojen lasten yhdistyksen toimeenpaneva johtaja. “Alustalla oleva sanasto on kaikkien ASL-ammattilaisten validoima, joten käyttäjät voivat luottaa siihen, mitä he oppivat. ” NVIDIA aikoo hyödyntää tätä datasettiä edistääkseen edelleen tekoälysovelluksia, jotka purkavat viestintäesteitä kuurojen ja kuulevien yhteisöjen välillä. Data tulee olemaan julkisesti saatavilla resurssina kattavien teknologioiden, kuten tekoälyagenttien, digitaalisten ihmissovellusten ja videokonferenssityökalujen kehittämiseen.

Sitä voidaan myös käyttää Signs-alustan parantamiseksi, tarjoten reaaliaikaista, tekoälypohjaista tukea ja palautetta ASL-sovelluksille koko ekosysteemissä. **ASL-koulutuksen parantaminen ja kielen vivahteiden huomioiminen** Datan keruuvaiheessaan Signs toimii jo vankkana alustana ASL-kielen omaksumiselle, tarjoten käyttäjille mahdollisuuden oppia ja harjoitella olennaista 100 viittoman joukkoa, mikä parantaa heidän kykyään kommunikoida ystävien tai perheenjäsenten kanssa, jotka käyttävät ASL:ää. “Signs-oppimisalusta voisi auttaa kuurojen lasten perheitä etsimään nopeasti tiettyjä sanoja ja tarkkailemaan niihin liittyviä viittomia. Se on käytännöllinen työkalu ASL:n arkipäiväiseen käyttöön virallisten luokkien ulkopuolella, ” Dowling sanoi. “Kuvittelen, että sekä lapset että vanhemmat tutkivat alustaa yhdessä ja pitävät siitä hauskaa. ” Vaikka Signs korostaa tällä hetkellä käsiliikkeitä ja sormien asentoja jokaiselle viittomalle, ASL sisältää myös kasvojen ilmeitä ja pään liikkeitä, jotka välittävät merkitystä. Signs-tiimi tutkii, miten näitä ei-manuaalisia signaaleja voidaan havainnoida ja integroida tuleviin versioihin alustasta. He tutkivat myös tapoja sisällyttää muita vivahteita, kuten alueellisia variaatioita ja slangi, Signs-alustaan, rikastaen sen ASL-tietokantaa. Yhteistyössä Rochesterin teknologian instituutin saavutettavuuden ja osallistumisen tutkimuskeskuksen tutkijoiden kanssa he aikovat arvioida ja parantaa Signs-alustan käyttäjäkokemusta kuurojen ja huonokuuloisten käyttäjien osalta. “ASL:n saavutettavuuden parantaminen on jatkuva ponnistus, ” sanoi Anders Jessen, Hello Monday/DEPT:n perustajapartneri, joka kehitti Signs-verkkopaketin ja työskenteli aiemmin yhdessä Amerikan kuurojen lasten yhdistyksen kanssa Fingerspelling. xyz-sovelluksessa, joka opettaa ASL-aakkoset. “Signs on suunniteltu vastaamaan kehittyneiden tekoälytyökalujen kysyntään, jotka auttavat purkamaan viestintäeroja kuurojen ja kuulevien yhteisöjen välillä. ” Signs-alustan taustalla oleva datasetti on odotettavissa julkistettavaksi myöhemmin tänä vuonna.