獨家:索尼揭幕式手語中的遊戲中翻譯技術

作者 : Charlotte Feb 11,2025

Sony Patents In-Game Sign Language Translator索尼的最新專利專注於通過引入實時遊戲中語言翻譯來增強聾人遊戲玩家的可訪問性。 該專利詳細介紹了一個能夠在遊戲環境中將一種手語翻譯成另一種手語的係統。

索尼專利視頻遊戲的實時手語翻譯

利用VR和雲遊戲技術

Sony Patents In-Game Sign Language Translator這項創新的專利,標題為“虛擬環境中手語的翻譯”,提出了一個係統,可以使用不同的符號語言(例如美國手語(ASL)和日語手語(JSL)之間的遊戲玩家之間的無縫溝通(JSL) 。 目的是在遊戲中互動期間促進實時翻譯,彌合聾人的交流差距。

所提出的技術使用屏幕上的虛擬指標或頭像來顯示手語翻譯。 該過程涉及三步翻譯:首先將標誌手勢轉換為文本;其次,文本被翻譯成目標語言。最後,翻譯的文本轉換回相應的手語手勢。

正如索尼在專利中解釋的那樣:“本披露的實現與從一個用戶捕獲手語的方法和係統有關,並用其本地手語將其轉換為另一個用戶。由於符號語言在地理上不同,因此此技術解決了該技術的問題。需要準確的捕獲,語言理解和生成適當的手語輸出。”

Sony Patents In-Game Sign Language Translator索尼建議利用VR耳機或頭部安裝的顯示器(HMD)進行係統實現。 這些HMD將連接到用戶設備(PC,遊戲機等),以提供身臨其境的虛擬環境。 該專利進一步提出了一個基於網絡的係統,可能利用雲遊戲體係結構,用戶設備相互通信和遊戲服務器。 該服務器維護遊戲的狀態,確保在共享虛擬環境中同步遊戲玩法和交互。 雲遊戲功能將允許用戶設備之間的視頻渲染和流式傳輸。 這種設置允許通過準確的手語翻譯進行無縫的多人遊戲交互,即使在地理距離之間也可以進行。