NVIDIA, American Society for Deaf Children dan agensi kreatif Hello Monday membantu menutup kesenjangan ini dengan Signs, platform web interaktif yang dibangun untuk mendukung pembelajaran ASL dan pengembangan aplikasi AI yang dapat diakses.
Pembelajar bahasa isyarat dapat mengakses perpustakaan tanda ASL yang divalidasi platform untuk memperluas kosakata mereka dengan bantuan avatar 3D yang menunjukkan tanda — dan menggunakan alat AI yang menganalisis rekaman webcam untuk menerima umpan balik waktu nyata tentang penandatanganan mereka.
Penandatangan dari tingkat keahlian apa pun dapat berkontribusi dengan menandatangani kata-kata tertentu untuk membantu membangun himpunan data video untuk ASL.
Kumpulan data — yang bertujuan NVIDIA untuk berkembang menjadi 400.000 klip video yang mewakili 1.000 kata yang ditandatangani — sedang divalidasi oleh pengguna dan juru bahasa ASL yang fasih untuk memastikan keakuratan setiap tanda, menghasilkan kamus visual dan alat pengajaran berkualitas tinggi.
"Sebagian besar anak-anak tunarungu dilahirkan dari orang tua yang mendengar. Memberi anggota keluarga alat yang dapat diakses seperti Signs untuk mulai belajar ASL lebih awal memungkinkan mereka membuka saluran komunikasi yang efektif dengan anak-anak berusia enam hingga delapan bulan," kata Cheri Dowling, direktur eksekutif American Society for Deaf Children.
"Dan mengetahui bahwa guru ASL profesional telah memvalidasi semua kosakata di platform, pengguna dapat yakin dengan apa yang mereka pelajari."
Tim NVIDIA berencana untuk menggunakan kumpulan data ini untuk lebih mengembangkan aplikasi AI yang mendobrak hambatan komunikasi antara komunitas tunarungu dan pendengaran.
Data tersebut dijadwalkan akan tersedia untuk umum sebagai sumber daya untuk membangun teknologi yang dapat diakses termasuk agen AI, aplikasi manusia digital, dan alat konferensi video. Ini juga dapat digunakan untuk meningkatkan Signs dan mengaktifkan platform ASL di seluruh ekosistem dengan dukungan dan umpan balik bertenaga AI secara real-time.
Dukung Pendidikan ASL, Eksplorasi Nuansa Bahasa
Selama fase pengumpulan data, Signs telah menyediakan platform yang kuat untuk akuisisi bahasa ASL, menawarkan kesempatan bagi individu untuk belajar dan mempraktikkan set awal 100 isyarat sehingga mereka dapat berkomunikasi secara lebih efektif dengan teman atau anggota keluarga yang menggunakan ASL.
"Platform pembelajaran Signs dapat membantu keluarga dengan anak-anak tunarungu dengan cepat mencari kata tertentu dan melihat cara membuat tanda yang sesuai. Ini adalah alat yang dapat membantu mendukung penggunaan ASL sehari-hari mereka di luar kelas yang lebih formal," kata Dowling.
"Saya melihat anak-anak dan orang tua menjelajahinya - dan saya pikir mereka bisa bermain dengannya bersama."
Sementara Signs saat ini berfokus pada gerakan tangan dan posisi jari untuk setiap isyarat, ASL juga menggabungkan ekspresi wajah dan gerakan kepala untuk menyampaikan makna. Tim di balik Signs sedang mengeksplorasi bagaimana sinyal non-manual ini dapat dilacak dan diintegrasikan dalam versi platform yang akan datang.
Mereka juga menyelidiki bagaimana nuansa lain, seperti variasi regional dan istilah gaul, dapat direpresentasikan dalam Signs untuk memperkaya database ASL-nya — dan bekerja dengan para peneliti di Pusat Penelitian Aksesibilitas dan Inklusi Rochester Institute of Technology untuk mengevaluasi dan lebih meningkatkan pengalaman pengguna platform Signs untuk pengguna tunarungu dan gangguan pendengaran.
"Meningkatkan aksesibilitas ASL adalah upaya berkelanjutan," kata Anders Jessen, mitra pendiri Hello Monday/DEPT, yang membangun platform web Signs dan sebelumnya bekerja dengan American Society for Deaf Children on Fingerspelling.xyz, sebuah aplikasi yang mengajarkan alfabet ASL kepada pengguna.
"Tanda-tanda dapat melayani kebutuhan akan alat AI canggih yang membantu melampaui hambatan komunikasi antara komunitas tunarungu dan pendengaran." Kumpulan data di balik Signs direncanakan untuk dirilis akhir tahun ini.
Mulai belajar atau berkontribusi dengan Signs dan pelajari lebih lanjut tentang inisiatif AI NVIDIA yang dapat dipercaya. Peserta NVIDIA GTC, konferensi AI global yang berlangsung 17-21 Maret di San Jose, akan dapat berpartisipasi dalam Signs secara langsung di acara tersebut.
Cek Berita dan Artikel yang lain di
Google News
