Эксклюзив: Sony открывает технологию перевода в игре для языка жестов

Последний патент Sony фокусируется на повышении доступности для глухих геймеров путем введения в перевод языка жестов в реальном времени. Патент подробно описывает систему, способную перевести один язык жестов в другой в игровой среде.

Sony Патенты в режиме реального времени перевод языка жестов для видеоигр

Использование технологий VR и облачных игр

Этот инновационный патент под названием «Перевод языка жестов в виртуальной среде» предлагает систему, обеспечивающую беспрепятственное общение между геймерами, использующими различные языки знаков, такие как американский язык жестов (ASL) и японский язык жестов (JSL) Полем Цель состоит в том, чтобы облегчить перевод в реальном времени во время внутриигровых взаимодействий, преодолевая разрыв в коммуникации для глухих игроков.

Предлагаемая технология использует виртуальные индикаторы на экране или аватары для отображения языка жестов. Процесс включает в себя трехэтапный перевод: во-первых, жесты знаков преобразуются в текст; Во -вторых, текст переводится на целевой язык; и, наконец, переведенный текст преобразуется обратно в соответствующие жесты языка жестов.

Как объясняет Sony в патенте: «Реализации настоящего раскрытия связаны с методами и системами для захвата языка жестов от одного пользователя и перевода его для другого пользователя на их языке натурального значения. Поскольку языки знаков варьируются географически, эта технология обращается к Необходимость точного захвата, понимания языка и генерации соответствующего вывода языка жестов. »

Sony предлагает использовать гарнитуры VR или отображения (HMD) для реализации системы. Эти HMD подключатся к пользовательскому устройству (ПК, игровой консоли и т. Д.), Чтобы обеспечить захватывающую виртуальную среду. Патент также предлагает сетевую систему, потенциально использующую архитектуру облачных игр, где пользовательские устройства общаются друг с другом и игровым сервером. Этот сервер поддерживает состояние игры, обеспечивая синхронизированный игровой процесс и взаимодействие в общей виртуальной среде. Функциональность облачных игр позволит рендеринг видео и потоковую передачу между пользовательскими устройствами. Эта настройка позволяет беспрепятственно многопользовательские взаимодействия, даже на географических расстояниях, с точным переводом языка жестов.