Sony presenta il traduttore del linguaggio dei segni in-game potenziato dall'intelligenza artificiale

Sony ha depositato un brevetto che mira a fornire una maggiore accessibilità ai giocatori non udenti. Il brevetto di Sony dimostra come è possibile tradurre lingue dei segni specifiche in un'altra nel gioco.

Sony brevetta il traduttore da ASL a JSL per videogiochi, proponendo di utilizzare dispositivi VR e di lavorare su giochi cloud

Sony ha depositato un brevetto che aggiunge ai videogiochi un traduttore del linguaggio dei segni in tempo reale. Il brevetto, intitolato "TRADUZIONE DELLA LINGUA DEI SEGNI IN UN AMBIENTE VIRTUALE", illustra una tecnologia all'avanguardia in cui la lingua dei segni americana (ASL) può essere comunicata a un utente di lingua giapponese utilizzando la lingua dei segni giapponese (JSL) .

Sony ha affermato che mira a mettere in atto un sistema in grado di assistere i giocatori non udenti tramite traduzioni in tempo reale delle lingue dei segni durante le conversazioni all'interno del gioco. La tecnologia descritta nel brevetto consentirebbe a indicatori virtuali o avatar visualizzati sullo schermo di comunicare il linguaggio dei segni in tempo reale. Il sistema inizialmente tradurrà i gesti di segni di una lingua in testo, quindi convertirà il testo in un'altra lingua specificata e infine tradurrà i dati ricevuti nei gesti di segni dell'altra lingua.

"Implementazioni della presente informativa riguardano metodi e sistemi per acquisire il linguaggio dei segni di un utente (ad esempio, il giapponese) e tradurre il linguaggio dei segni in un altro utente (ad esempio, l'inglese)", ha descritto Sony nel brevetto. "Poiché le lingue dei segni variano a seconda delle origini geografiche, la lingua dei segni non è universale. Ciò fornisce la necessità di catturare in modo appropriato la lingua dei segni di un utente, comprendere la lingua madre e generare una nuova lingua dei segni come output per un altro utente nella sua lingua dei segni nativa ."

Un modo in cui questo sistema potrebbe essere implementato, come illustrato da Sony, sarebbe con l'aiuto di un virtuale dispositivo di tipo realtà o display montato sulla testa (HMD). "In alcune implementazioni, l'HMD si collega tramite una connessione cablata o wireless a un dispositivo dell'utente, come un personal computer, una console di gioco o un altro dispositivo informatico", Sony ha spiegato. "In alcune implementazioni, il dispositivo dell'utente esegue il rendering della grafica da visualizzare tramite l'HMD che fornisce avvincente una visualizzazione dell'ambiente virtuale per l'utente."

Sony ha inoltre proposto che un dispositivo utente possa comunicare senza problemi con un altro dispositivo utente su una rete con un server di gioco. "In alcune implementazioni, il server di gioco esegue una sessione condivisa di un videogioco, mantenendo lo stato autorevole del videogioco e del suo ambiente virtuale", ha affermato Sony, "e con il quale i dispositivi dell'utente sono sincronizzati riguardo lo stato dell'ambiente virtuale."

Con questa configurazione, gli utenti possono condividere e interagire tra loro nello stesso ambiente virtuale, aka gioco, su una rete o un server condiviso. Sony ha inoltre affermato che in alcune implementazioni del sistema, il server di gioco potrebbe far parte di un sistema di cloud gaming, che "renderizza e trasmette video in streaming" tra ciascun dispositivo dell'utente.