Penterjemah Bahasa Isyarat Dalam Permainan Dikuasakan AI Didedahkan oleh Sony

Sony telah memfailkan paten yang bertujuan untuk meningkatkan kebolehaksesan untuk pemain pekak. Paten Sony menunjukkan cara bahasa isyarat tertentu boleh diterjemahkan ke dalam permainan yang lain.

Sony Paten ASL to JSL Translator untuk Permainan Video Dicadangkan untuk Menggunakan Peranti VR dan Bekerja Melalui Cloud Gaming

Sony telah memfailkan paten yang menambahkan penterjemah bahasa isyarat masa nyata pada permainan video. Paten itu, bertajuk "TERJEMAHAN BAHASA Isyarat DALAM PERSEKITARAN MAYA," menggambarkan teknologi termaju di mana Bahasa Isyarat Amerika (ASL) boleh disampaikan kepada pengguna berbahasa Jepun menggunakan Bahasa Isyarat Jepun (JSL) .

Sony berkata ia bertujuan untuk menyediakan sistem yang boleh membantu pemain pekak melalui terjemahan masa nyata bahasa isyarat semasa perbualan dalam permainan. Teknologi yang diterangkan dalam paten akan membolehkan penunjuk maya atau avatar yang dipaparkan pada skrin untuk berkomunikasi bahasa isyarat dalam masa nyata. Sistem pada mulanya akan menterjemah gerak isyarat satu bahasa ke dalam teks, kemudian menukar teks kepada bahasa lain yang ditentukan, dan akhirnya menterjemah data yang diterima ke dalam gerak isyarat isyarat bahasa lain.

"Pelaksanaan pendedahan semasa berkaitan dengan kaedah dan sistem untuk menangkap bahasa isyarat seorang pengguna (cth., Jepun), dan menterjemah bahasa isyarat kepada pengguna lain (cth., Bahasa Inggeris)," Sony menerangkan dalam paten. "Oleh kerana bahasa isyarat berbeza-beza bergantung pada asal usul geografi, bahasa isyarat tidak universal. Ini menyediakan keperluan untuk menangkap bahasa isyarat yang sesuai bagi seorang pengguna, memahami bahasa ibunda dan menjana bahasa isyarat baharu sebagai output untuk pengguna lain dalam bahasa isyarat ibunda mereka ."

Salah satu cara sistem ini boleh dilaksanakan, seperti yang digambarkan oleh Sony, adalah dengan bantuan realiti maya-jenis peranti atau paparan dipasang pada kepala (HMD). "Dalam sesetengah pelaksanaan, HMD bersambung melalui sambungan berwayar atau wayarles ke peranti pengguna, seperti komputer peribadi, konsol permainan atau peranti pengkomputeran lain," Sony huraikan. "Dalam sesetengah pelaksanaan, peranti pengguna memaparkan grafik untuk paparan melalui HMD yang menyediakan mengasyikkan tontonan persekitaran maya untuk pengguna."

Sony seterusnya mencadangkan bahawa satu peranti pengguna boleh berkomunikasi dengan lancar dengan peranti pengguna lain melalui rangkaian dengan pelayan permainan. "Dalam sesetengah pelaksanaan, pelayan permainan melaksanakan sesi perkongsian permainan video, mengekalkan keadaan berwibawa permainan video dan persekitaran mayanya," kata Sony, "dan yang mana peranti pengguna disegerakkan berkenaan keadaan persekitaran maya."

Dengan persediaan ini, pengguna boleh berkongsi dan berinteraksi antara satu sama lain dalam persekitaran maya yang sama, permainan aka, melalui rangkaian atau pelayan yang dikongsi. Sony juga berkata bahawa dalam beberapa pelaksanaan sistem, pelayan permainan boleh menjadi sebahagian daripada sistem permainan awan, yang "memaparkan dan menstrim video" antara setiap peranti pengguna.