KONTAN.CO.ID - HANGZHOU. Alibaba meluncurkan penerjemah bahasa isyarat virtual Xiaomo untuk memastikan para individu dengan gangguan pendengaran bisa berpartisipasi lebih baik selama pertandingan Asian Para Games 2022 Hangzhou.

Menurut Organisasi Kesehatan Dunia (WHO ), saat ini, lebih dari 1,5 miliar orang atau hampir 20% dari populasi global hidup dengan gangguan pendengaran. 

Untuk mendorong inklusivitas di Asian Para Games yang akan berlangsung 22 hingga 28 Oktober, Alibaba Cloud memperkenalkan avatar digitalnya, Xiaomo, yang berfungsi sebagai penerjemah bahasa isyarat bagi individu dengan gangguan pendengaran.

Alibaba Cloud sebagai pelopor cloud mengintegrasikan avatar digital Xiaomo ke dalam aplikasi mini pada platform pembayaran Alipay. Aplikasi mini ini mendukung terjemahan dua arah antara bahasa isyarat dan bahasa lisan China. 

Pengguna bisa memasukkan pesan suara, yang akan diterjemahkan oleh karakter virtual ke dalam bahasa isyarat untuk individu dengan gangguan pendengaran. 

Baca Juga: Lewat Energy Expert, Alibaba Cloud Dorong Gerakan Rendah Karbon di Asian Games

Sebaliknya, aplikasi mini bisa menerjemahkan bahasa isyarat ke dalam bahasa lisan, sehingga memudahkan komunikasi yang lancar antara orang yang dapat mendengar dan orang dengan gangguan pendengaran. 

Bahasa isyarat, dengan perpaduan unik antara isyarat, ekspresi, dan gerakan tubuh, memiliki fonetik, kosakata, dan tata bahasa tersendiri yang berbeda dari bahasa lisan. 

Untuk mengakomodasi kerumitan ini, Alibaba Cloud mengumpulkan rangkaian data terjemahan bahasa isyarat China yang berisi 25.000 isyarat.

Alibaba Cloud kemudian memberi keterangan dari praktisi bahasa isyarat dan orang-orang dengan gangguan pendengaran di seluruh Provinsi Zhejiang, China.

Alibaba Cloud memanfaatkan algoritma pengenalan visual yang canggih dan kemampuan pelacakan gerakannya untuk menangkap gerakan orang dengan gangguan pendengaran.

Kemudian, menerjemahkan bahasa isyarat ke dalam bahasa alami dengan model penerjemahan bahasa yang canggih. 

Baca Juga: Dongkrak Efisiensi Asian Games Hangzhou, Alibaba Sempurnakan Aplikasi Super DingTalk

Untuk mengubah bahasa alami menjadi bahasa isyarat, Alibaba Cloud juga mengembangkan jaringan neural mendalam dan modul pembangkit gerakan bibir, yang memungkinkan karakter virtual melakukan gerakan bahasa isyarat secara akurat.

"Melalui integrasi teknologi pemrosesan alami bahasa, penglihatan komputer, dan pembelajaran mesin, kami telah mengembangkan sistem penerjemahan bahasa isyarat," Zhang Bang, Algorithm Engineer Alibaba Cloud, dalam paparan kepada wartawan termasuk KONTAN di Hangzhou, Kamis (28/9).

"Inovasi ini bertujuan untuk membuat Asian Para Games menjadi lebih inklusif dan dapat diakses oleh mereka yang memiliki gangguan pendengaran," ujarnya. 

Xiaomo, juga dimasukkan ke dalam saluran berita Asian Para Games 2022 Hangzhou, untuk meningkatkan aksesibilitas pengumumannya.

Selama Asian Para Games 2022 Hangzhou, Xiaomo bisa membantu peserta dengan gangguan pendengaran untuk berinteraksi dengan sukarelawan di lokasi pertandingan untuk berbagai bantuan. 

Termasuk, menanyakan arah, mencari bantuan medis, dan mendapatkan bantuan untuk menonton pertandingan.

Editor: S.S. Kurniawan