Trình dịch ngôn ngữ ký hiệu trong trò chơi được hỗ trợ bởi AI được Sony ra mắt

Sony đã nộp bằng sáng chế nhằm mục đích tăng cường khả năng tiếp cận cho những người chơi game khiếm thính. Bằng sáng chế của Sony chứng minh cách dịch các ngôn ngữ ký hiệu cụ thể sang một ngôn ngữ ký hiệu khác trong trò chơi.

Sony cấp bằng sáng chế ASL sang JSL Translator cho trò chơi điện tửĐược đề xuất sử dụng thiết bị VR và làm việc trên trò chơi trên nền tảng đám mây

Sony đã nộp bằng sáng chế bổ sung trình dịch ngôn ngữ ký hiệu theo thời gian thực cho trò chơi điện tử. Bằng sáng chế có tiêu đề "DỊCH NGÔN NGỮ KÝ HIỆU TRONG MÔI TRƯỜNG ẢO" minh họa một công nghệ tiên tiến trong đó Ngôn ngữ ký hiệu của Mỹ (ASL) có thể được giao tiếp với người dùng nói tiếng Nhật bằng Ngôn ngữ ký hiệu tiếng Nhật (JSL) .

Sony cho biết họ đặt mục tiêu triển khai một hệ thống có thể hỗ trợ người chơi khiếm thính thông qua bản dịch ngôn ngữ ký hiệu theo thời gian thực trong các cuộc trò chuyện trong trò chơi. Công nghệ được mô tả trong bằng sáng chế sẽ cho phép các chỉ báo hoặc hình đại diện ảo được hiển thị trên màn hình để giao tiếp ngôn ngữ ký hiệu trong thời gian thực. Ban đầu, hệ thống sẽ dịch cử chỉ ký hiệu của một ngôn ngữ thành văn bản, sau đó chuyển văn bản sang ngôn ngữ được chỉ định khác và cuối cùng dịch dữ liệu nhận được sang cử chỉ ký hiệu của ngôn ngữ kia.

"Việc triển khai tiết lộ hiện tại liên quan đến các phương pháp và hệ thống để nắm bắt ngôn ngữ ký hiệu của một người dùng (ví dụ: tiếng Nhật) và dịch ngôn ngữ ký hiệu sang người dùng khác (ví dụ: tiếng Anh)", Sony mô tả trong bằng sáng chế. "Vì ngôn ngữ ký hiệu khác nhau tùy thuộc vào nguồn gốc địa lý nên ngôn ngữ ký hiệu không phổ biến. Điều này dẫn đến nhu cầu nắm bắt ngôn ngữ ký hiệu của một người dùng một cách thích hợp, hiểu ngôn ngữ bản địa và tạo ngôn ngữ ký hiệu mới làm đầu ra cho người dùng khác bằng ngôn ngữ ký hiệu mẹ đẻ của họ ."

Một cách để triển khai hệ thống này, như Sony đã minh họa, là với sự hỗ trợ của một thiết bị hoặc loại thực tế ảo màn hình gắn trên đầu (HMD). Sony chi tiết: "Trong một số triển khai, HMD kết nối thông qua kết nối có dây hoặc không dây với thiết bị người dùng, chẳng hạn như máy tính cá nhân, bảng điều khiển trò chơi hoặc thiết bị điện toán khác". "Trong một số triển khai, thiết bị người dùng hiển thị đồ họa để hiển thị thông qua HMD mang đến cho người dùng khả năng xem nghiêm túc về môi trường ảo."

Sony còn đề xuất thêm rằng một thiết bị người dùng có thể giao tiếp liền mạch với một thiết bị người dùng khác qua mạng có máy chủ trò chơi. Sony cho biết: "Trong một số triển khai, máy chủ trò chơi thực thi phiên chia sẻ của trò chơi điện tử, duy trì trạng thái có thẩm quyền của trò chơi điện tử và môi trường ảo của nó," Sony cho biết, "và với đó các thiết bị người dùng được đồng bộ hóa về trạng thái của môi trường ảo."

Với thiết lập này, người dùng có thể chia sẻ và tương tác với nhau trong cùng một môi trường ảo, trò chơi aka qua mạng hoặc máy chủ dùng chung. Sony cũng cho biết thêm rằng trong một số triển khai của hệ thống, máy chủ trò chơi có thể là một phần của hệ thống trò chơi đám mây, hệ thống này "kết xuất và truyền phát video" giữa mỗi thiết bị người dùng.