KI-gestützter In-Game-Gebärdensprachübersetzer von Sony vorgestellt

Sony hat ein Patent angemeldet, das darauf abzielt, gehörlosen Spielern einen besseren Zugang zu ermöglichen. Sonys Patent zeigt, wie bestimmte Gebärdensprachen im Spiel in eine andere übersetzt werden können.

Sony patentiert ASL-zu-JSL-Übersetzer für VideospieleVorgeschlagen für die Verwendung von VR-Geräten und die Arbeit über Cloud-Gaming

Sony hat ein Patent angemeldet, das Videospielen einen Gebärdensprachübersetzer in Echtzeit hinzufügt. Das Patent mit dem Titel „ÜBERSETZUNG DER GEBÄRDENSPRACHE IN EINER VIRTUELLEN UMGEBUNG“ veranschaulicht eine Spitzentechnologie, mit der die amerikanische Gebärdensprache (ASL) einem japanischsprachigen Benutzer mithilfe der japanischen Gebärdensprache (JSL) vermittelt werden kann. .

Sony sagte, es wolle ein System einführen, das gehörlosen Spielern durch Echtzeitübersetzungen von Gebärdensprachen während Gesprächen im Spiel helfen kann. Die im Patent beschriebene Technologie würde es virtuellen Indikatoren oder Avataren ermöglichen, die auf dem Bildschirm angezeigt werden, um Gebärdensprache in Echtzeit zu kommunizieren. Das System übersetzt zunächst die Gebärdengesten einer Sprache in Text, wandelt dann den Text in eine andere bestimmte Sprache um und übersetzt schließlich die empfangenen Daten in die Gebärdengesten der anderen Sprache.

"Implementierungen der vorliegenden Offenbarung beziehen sich auf Methoden und Systeme zum Erfassen der Gebärdensprache eines Benutzers (z. B. Japanisch) und zum Übersetzen der Gebärdensprache für einen anderen Benutzer (z. B. Englisch)“, beschrieb Sony im Patent. „Da Gebärdensprachen je nach geografischer Herkunft variieren, ist Gebärdensprache nicht universell. Dies führt dazu, dass die Gebärdensprache eines Benutzers angemessen erfasst, die Muttersprache verstanden und neue Gebärdensprache als Ausgabe für einen anderen Benutzer in seiner Muttersprache generiert werden muss.“ ."

Eine Möglichkeit, dieses System zu implementieren, wäre, wie Sony dargestellt hat, die Hilfe eines virtuellen Systems Reality-artiges Gerät oder Head-Mounted-Display (HMD). „In einigen Implementierungen verbindet sich das HMD über eine drahtgebundene oder drahtlose Verbindung mit einem Benutzergerät, beispielsweise einem Personalcomputer, einer Spielekonsole oder einem anderen Computergerät“, erläutert von Sony. „In einigen Implementierungen rendert das Benutzergerät Grafiken zur Anzeige über das HMD, die dem Benutzer eine fesselnde Betrachtung der virtuellen Umgebung ermöglichen.“

Sony schlug außerdem vor, dass ein Benutzergerät über ein Netzwerk mit einem Spieleserver nahtlos mit einem anderen Benutzergerät kommunizieren könnte. „In einigen Implementierungen führt der Spieleserver eine gemeinsame Sitzung eines Videospiels aus und behält dabei den autoritativen Status des Videospiels und seiner virtuellen Umgebung bei“, sagte Sony, „und mit dem die Benutzergeräte synchronisiert werden.“ den Zustand der virtuellen Umgebung. Sony sagte außerdem, dass in einigen Implementierungen des Systems der Spieleserver Teil eines Cloud-Gaming-Systems sein könnte, das „Videos rendert und streamt“ zwischen jedem Benutzergerät.