Sony เปิดตัวนักแปลภาษามือในเกมที่ขับเคลื่อนด้วย AI

Sony ได้ยื่นสิทธิบัตรที่มีจุดมุ่งหมายเพื่อเพิ่มการเข้าถึงสำหรับนักเล่นเกมที่หูหนวก สิทธิบัตรของ Sony แสดงให้เห็นว่าภาษามือเฉพาะสามารถแปลภาษาอื่นในเกมได้อย่างไร

Sony จดสิทธิบัตร ASL เป็น JSL Translator สำหรับวิดีโอเกมที่เสนอให้ใช้อุปกรณ์ VR และทำงานบนเกมบนคลาวด์

Sony ได้ยื่นสิทธิบัตรที่เพิ่มตัวแปลภาษามือแบบเรียลไทม์ให้กับวิดีโอเกม สิทธิบัตรชื่อ "การแปลภาษามือในสภาพแวดล้อมเสมือนจริง" แสดงให้เห็นถึงเทคโนโลยีล้ำหน้า ซึ่งภาษามือแบบอเมริกัน (ASL) สามารถสื่อสารกับผู้ใช้ที่พูดภาษาญี่ปุ่นได้โดยใช้ภาษามือภาษาญี่ปุ่น (JSL) .

Sony กล่าวว่ามีเป้าหมายที่จะวางระบบที่สามารถช่วยเหลือนักเล่นเกมที่หูหนวกผ่านการแปลภาษามือแบบเรียลไทม์ระหว่างการสนทนาในเกม เทคโนโลยีที่อธิบายไว้ในสิทธิบัตรจะช่วยให้ตัวบ่งชี้หรืออวตารเสมือนที่แสดงบนหน้าจอสามารถสื่อสารภาษามือแบบเรียลไทม์ ในขั้นต้นระบบจะแปลท่าทางสัญลักษณ์ของภาษาหนึ่งเป็นข้อความ จากนั้นแปลงข้อความเป็นภาษาอื่นที่ระบุ และสุดท้ายจะแปลข้อมูลที่ได้รับเป็นท่าทางสัญลักษณ์ของอีกภาษาหนึ่ง

"การดำเนินการตามการเปิดเผยปัจจุบัน เกี่ยวข้องกับวิธีการและระบบในการจับภาษามือของผู้ใช้รายหนึ่ง (เช่น ภาษาญี่ปุ่น) และการแปลภาษามือไปยังผู้ใช้รายอื่น (เช่น ภาษาอังกฤษ)" โซนี่อธิบายไว้ในสิทธิบัตร "เนื่องจากภาษามือแตกต่างกันไปขึ้นอยู่กับต้นกำเนิดทางภูมิศาสตร์ ภาษามือจึงไม่เป็นสากล สิ่งนี้ทำให้จำเป็นต้องจับภาษามือของผู้ใช้คนหนึ่งอย่างเหมาะสม ทำความเข้าใจภาษาแม่ และสร้างภาษามือใหม่เป็นผลลัพธ์สำหรับผู้ใช้รายอื่นในภาษามือของตนเอง "

วิธีหนึ่งที่ระบบนี้สามารถนำไปใช้ได้ ดังที่ Sony แสดงให้เห็น ก็คือได้รับความช่วยเหลือของ เสมือน ความเป็นจริง-ประเภทอุปกรณ์หรือจอแสดงผลแบบสวมศีรษะ (HMD) "ในการใช้งานบางอย่าง HMD จะเชื่อมต่อผ่านการเชื่อมต่อแบบมีสายหรือไร้สายกับอุปกรณ์ของผู้ใช้ เช่น คอมพิวเตอร์ส่วนบุคคล คอนโซลเกม หรืออุปกรณ์คอมพิวเตอร์อื่นๆ" Sony อธิบายเพิ่มเติม "ในการใช้งานบางอย่าง อุปกรณ์ของผู้ใช้จะเรนเดอร์กราฟิกสำหรับแสดงผลผ่าน HMD ที่ให้ ครอบคลุม การรับชมสภาพแวดล้อมเสมือนจริงสำหรับผู้ใช้"

โซนี่เสนอเพิ่มเติมว่าอุปกรณ์ผู้ใช้เครื่องหนึ่งสามารถสื่อสารกับอุปกรณ์ผู้ใช้เครื่องอื่นได้อย่างราบรื่นผ่านเครือข่ายที่มีเซิร์ฟเวอร์เกม "ในการใช้งานบางอย่าง เซิร์ฟเวอร์เกมดำเนินการเซสชั่นที่ใช้ร่วมกันของวิดีโอเกม โดยรักษา สถานะที่เชื่อถือได้ ของวิดีโอเกมและสภาพแวดล้อมเสมือนจริง" โซนี่กล่าว "และอุปกรณ์ของผู้ใช้จะซิงโครไนซ์กับสิ่งใด สถานะของสภาพแวดล้อมเสมือนจริง"

ด้วยการตั้งค่านี้ ผู้ใช้สามารถแบ่งปันและโต้ตอบกันในสภาพแวดล้อมเสมือนเดียวกัน เกม aka ผ่านเครือข่ายหรือเซิร์ฟเวอร์ที่ใช้ร่วมกัน โซนี่ยังกล่าวอีกว่าในการใช้งานระบบบางอย่าง เซิร์ฟเวอร์เกมอาจเป็นส่วนหนึ่งของระบบเกมบนคลาวด์ ซึ่ง "เรนเดอร์และสตรีมวิดีโอ" ระหว่างอุปกรณ์ของผู้ใช้แต่ละเครื่อง