Sony подала заявку на патент: перевод игр на язык жестов в реальном времени

Патент Sony: внутриигровой переводчик языка жестов позволяет глухонемым игрокам играть в игры! Sony подала заявку на патент, призванную сделать игры более доступными для глухих геймеров. Патент описывает технологию, которая обеспечивает перевод в реальном времени между различными языками жестов в игре.

Использование VR-оборудования и облачных игр для перевода в реальном времени

Патент Sony под названием «Перевод языка жестов в виртуальных средах» демонстрирует технологию, которая переводит американский язык жестов (ASL) на японский язык жестов (JSL), позволяя игрокам, говорящим по-японски, понимать и использовать плеер ASL.

Цель Sony — создать систему, которая позволит в реальном времени переводить язык жестов в играх, чтобы помочь глухонемым игрокам участвовать в игровых разговорах. В патенте описана технология, которая позволит общаться на языке жестов в реальном времени с помощью виртуального индикатора или аватара, отображаемого на экране. Система сначала переводит жесты на одном языке жестов в текст, затем преобразует текст в другой указанный язык и, наконец, переводит полученные данные в жесты языка жестов на другом языке.

Sony объясняет в патенте: «Варианты настоящего изобретения относятся к способам и системам для захвата языка жестов одного пользователя (например, говорящего по-японски) и перевода языка жестов другому пользователю (например, говорящему по-английски). Поскольку языки жестов различаются в зависимости от региона происхождения, для этого требуется надлежащим образом зафиксировать язык жестов одного пользователя, понять его родной язык и создать его родной язык жестов в качестве вывода."

Одним из решений, предложенных Sony, является использование VR-оборудования или головных дисплеев (HMD). Sony подробно описывает: «В некоторых вариантах реализации HMD подключается к пользовательскому устройству, такому как персональный компьютер, игровая консоль или другое вычислительное устройство, через проводное или беспроводное соединение. В некоторых вариантах реализации пользовательское устройство отображает графику, отображаемую через HMD, предоставьте пользователям захватывающий вид виртуальной среды »

Sony также предложила, чтобы одно пользовательское устройство могло беспрепятственно взаимодействовать с другим пользовательским устройством на игровом сервере через сеть. В Sony заявили: «В некоторых вариантах реализации игровой сервер выполняет общий сеанс видеоигры, поддерживает каноническое состояние видеоигры и ее виртуальной среды, а состояние пользовательского устройства относительно виртуальной среды синхронизируется с ним». 🎜>

Благодаря этой настройке пользователи могут совместно использовать и взаимодействовать в одной и той же виртуальной среде (например, игре) в общей сети или на сервере. Sony также добавляет, что в некоторых вариантах системы игровой сервер может быть частью облачной игровой системы, которая может «рендеринговать и транслировать видео» между каждым пользовательским устройством.