Ngôn ngữ ký hiệu Mỹ (ASL) xếp thứ ba trong các ngôn ngữ được sử dụng rộng rãi nhất tại Hoa Kỳ, tuy nhiên, có một sự thiếu hụt đáng kể các công cụ AI được phát triển với dữ liệu ASL so với nguồn tài nguyên phong phú cho các ngôn ngữ chính của quốc gia này, bao gồm tiếng Anh và tiếng Tây Ban Nha. Để thu hẹp khoảng cách này, NVIDIA, Hiệp hội Trẻ em Điếc Hoa Kỳ và công ty sáng tạo Hello Monday đã hợp tác để tạo ra Signs, một nền tảng web tương tác được thiết kế để thuận tiện cho việc học ASL và phát triển các ứng dụng AI có thể tiếp cận. Nền tảng này cung cấp cho người dùng một thư viện ký hiệu ASL đã được xác thực, cho phép người học ngôn ngữ nâng cao vốn từ vựng của họ với sự trợ giúp của một hình đại diện 3D minh họa cho mỗi ký hiệu. Ngoài ra, nó còn có một công cụ AI phân tích các bản ghi webcam, cung cấp phản hồi theo thời gian thực về kỹ năng ký hiệu của người dùng. Những cá nhân ở bất kỳ trình độ nào cũng có thể đóng góp bằng cách ký các từ cụ thể, hỗ trợ trong việc xây dựng một tập dữ liệu video mã nguồn mở cho ASL. NVIDIA đặt mục tiêu mở rộng tập dữ liệu này lên tới 400. 000 clip video thể hiện 1. 000 từ ký hiệu, với các người dùng ASL thông thạo và các phiên dịch viên xác thực từng ký hiệu để đảm bảo độ chính xác. Điều này sẽ tạo ra một từ điển hình ảnh chất lượng cao và tài nguyên giảng dạy. “Phần lớn trẻ em điếc được sinh ra trong gia đình có cha mẹ nghe. Việc cung cấp các công cụ dễ tiếp cận như Signs cho các thành viên trong gia đình để bắt đầu học ASL sớm sẽ giúp họ thiết lập giao tiếp hiệu quả với trẻ từ sáu đến tám tháng tuổi, ” Cheri Dowling, giám đốc điều hành của Hiệp hội Trẻ em Điếc Hoa Kỳ, cho biết. “Với tất cả từ vựng trên nền tảng được xác thực bởi các giáo viên ASL chuyên nghiệp, người dùng có thể tin tưởng vào những gì họ đang học. ” NVIDIA dự định tận dụng tập dữ liệu này để thúc đẩy thêm các ứng dụng AI nhằm xóa bỏ rào cản giao tiếp giữa cộng đồng điếc và nghe. Dữ liệu sẽ được công khai như một nguồn tài nguyên để phát triển các công nghệ bao hàm, chẳng hạn như các tác nhân AI, các ứng dụng con người kỹ thuật số, và các công cụ hội nghị video.

Nó cũng có thể được sử dụng để cải thiện nền tảng Signs, cung cấp hỗ trợ và phản hồi theo thời gian thực, được điều khiển bởi AI cho các ứng dụng ASL trong toàn bộ hệ sinh thái. **Nâng cao Giáo dục ASL và Giải quyết Nuance Ngôn Ngữ** Trong giai đoạn thu thập dữ liệu, Signs đã đóng vai trò như một nền tảng mạnh mẽ cho việc tiếp thu ngôn ngữ ASL, cho phép người dùng có cơ hội học và thực hành một bộ ký hiệu thiết yếu gồm 100 ký hiệu, giúp cải thiện khả năng giao tiếp với bạn bè hoặc thành viên gia đình sử dụng ASL. “Nền tảng học Signs có thể hỗ trợ các gia đình có trẻ em điếc nhanh chóng tìm kiếm các từ cụ thể và quan sát các ký hiệu liên quan. Đây là một công cụ thực tiễn để nâng cao việc sử dụng ASL hàng ngày của họ bên ngoài các lớp học chính thức, ” Dowling cho biết. “Tôi hình dung cả trẻ em và cha mẹ cùng khám phá nó và có những giây phút vui vẻ. ” Trong khi Signs hiện tại nhấn mạnh các chuyển động tay và vị trí ngón tay cho mỗi ký hiệu, ASL cũng bao gồm các biểu cảm khuôn mặt và chuyển động đầu để truyền đạt ý nghĩa. Nhóm đứng sau Signs đang xem xét cách mà các tín hiệu phi bằng tay này có thể được quan sát và tích hợp vào các phiên bản trong tương lai của nền tảng. Họ cũng đang xem xét các phương pháp để tích hợp các sắc thái khác, chẳng hạn như các biến thể vùng miền và tiếng lóng, vào Signs, từ đó làm phong phú thêm cơ sở dữ liệu ASL của nó. Hợp tác với các nhà nghiên cứu tại Trung tâm Nghiên cứu về Khả năng tiếp cận và Bao gồm của Viện Công nghệ Rochester, họ đặt mục tiêu đánh giá và nâng cao trải nghiệm người dùng của nền tảng Signs cho người dùng điếc và khiếm thính. “Việc nâng cao khả năng tiếp cận ASL là một nỗ lực liên tục, ” Anders Jessen, một đối tác sáng lập của Hello Monday/DEPT, đơn vị phát triển nền tảng web Signs và đã hợp tác với Hiệp hội Trẻ em Điếc Hoa Kỳ trong ứng dụng Fingerspelling. xyz, ứng dụng dạy bảng chữ cái ASL, cho biết. “Signs được thiết kế để đáp ứng nhu cầu về các công cụ AI tiên tiến giúp thu hẹp những khoảng cách giao tiếp giữa các cộng đồng điếc và nghe. ” Tập dữ liệu hỗ trợ Signs dự kiến sẽ được phát hành vào cuối năm nay.