ESCLUSIVO: Sony svela la tecnologia di traduzione in-game per la lingua dei segni

L'ultimo brevetto di Sony si concentra sul miglioramento dell'accessibilità per i giocatori non udenti introducendo la traduzione della lingua dei segni in tempo reale. Il brevetto descrive in dettaglio un sistema in grado di tradurre una lingua dei segni in un altro all'interno di un ambiente di gioco.

Sony Patents Traduzione della lingua dei segni in tempo reale per videogiochi

sfruttando la realtà virtuale e le tecnologie di gioco cloud

Questo brevetto innovativo, intitolato "Traduzione del linguaggio dei segni in un ambiente virtuale", propone un sistema che consente una comunicazione senza soluzione di continuità tra i giocatori che utilizzano diverse lingue dei segni, come American Sign Language (ASL) e Lingua di segni giapponese (JSL) . L'obiettivo è facilitare la traduzione in tempo reale durante le interazioni di gioco, colmando il divario di comunicazione per i giocatori non udenti.

La tecnologia proposta utilizza indicatori virtuali o avatar sullo schermo per visualizzare le traduzioni della lingua dei segni. Il processo prevede una traduzione in tre fasi: in primo luogo, i gesti dei segni vengono convertiti in testo; In secondo luogo, il testo viene tradotto nella lingua target; e infine, il testo tradotto viene convertito nei corrispondenti gesti della lingua dei segni.

come spiega Sony nel brevetto: "Le implementazioni della presente divulgazione si riferiscono a metodi e sistemi per l'acquisizione del linguaggio dei segni da un utente e la traduzione per un altro utente nella loro lingua dei segni nativa. Poiché i linguaggi dei segni variano geograficamente, questa tecnologia affronta il Necessità di acquisizione accurata, comprensione del linguaggio e generazione dell'output del linguaggio dei segni appropriato. "

Sony suggerisce l'utilizzo di cuffie VR o display montati sulla testa (HMD) per l'implementazione del sistema. Questi HMD si connetterebbero a un dispositivo utente (PC, console di gioco, ecc.) Per fornire un ambiente virtuale coinvolgente. Il brevetto propone ulteriormente un sistema basato sulla rete, utilizzando potenzialmente un'architettura di giochi cloud, in cui i dispositivi utente comunicano tra loro e un server di gioco. Questo server mantiene lo stato del gioco, garantendo il gameplay sincronizzato e l'interazione all'interno dell'ambiente virtuale condiviso. La funzionalità di gioco cloud consentirebbe il rendering video e lo streaming tra i dispositivi utente. Questa configurazione consente interazioni multiplayer senza soluzione di continuità, anche attraverso le distanze geografiche, con una traduzione accurata della lingua dei segni.