Sony подала заявку на патент, чтобы обеспечить лучшие функции доступности игр для глухонемых геймеров. Патент показывает, как в игре можно перевести один язык жестов на другой.
Патент Sony: переводчик ASL в JSL для видеоигр
Планируется использовать VR-оборудование и запускать его через облачные игры
Sony подала заявку на патент, чтобы добавить в видеоигры сурдоперевод в реальном времени. Патент под названием «Интерпретация языка жестов в виртуальных средах» демонстрирует метод, с помощью которого американский язык жестов (ASL) может передаваться носителям японского языка с использованием японского языка жестов (JSL).
Sony заявляет, что ее цель — создать систему, которая поможет глухим игрокам, переводя язык жестов в реальном времени во время внутриигровых разговоров. Технология, описанная в патенте, позволит виртуальному индикатору или аватару, отображаемому на экране, передавать язык жестов в реальном времени. Система сначала переводит жесты на одном языке в текст, затем преобразует текст на другой указанный язык и, наконец, переводит полученные данные в жесты на другом языке.
Sony описывает в патенте: «Варианты настоящего изобретения относятся к способам и системам для захвата языка жестов одного пользователя (например, японца) и перевода языка жестов другому пользователю (например, говорящему по-английски). «Поскольку языки жестов различаются в зависимости от регионального происхождения, языки жестов не являются универсальными. Это требует надлежащего захвата языка жестов одного пользователя, понимания его родного языка и создания нового языка жестов в качестве вывода для другого пользователя, адаптированного к нему. их родной язык жестов."
Как пояснили в Sony, один из способов реализации системы — это использование устройства типа VR или головного дисплея (HMD). «В некоторых вариантах реализации HMD подключается к пользовательскому устройству, такому как персональный компьютер, игровая консоль или другое вычислительное устройство, через проводное или беспроводное соединение», — уточняет Sony. «В некоторых вариантах реализации пользовательское устройство отображает дисплей. с помощью графики HMD, предоставляя пользователям захватывающий опыт просмотра в виртуальной среде».
Sony также предложила, чтобы одно пользовательское устройство могло беспрепятственно взаимодействовать с другим пользовательским устройством на игровом сервере через сеть. «В некоторых вариантах реализации игровой сервер выполняет общий сеанс видеоигры, поддерживает каноническое состояние видеоигры и ее виртуальной среды», — заявила Sony, — «и пользовательское устройство синхронизируется с ними относительно состояния виртуальной среды». .»
Благодаря этой настройке пользователи могут совместно использовать и взаимодействовать друг с другом в одной и той же виртуальной среде (например, игре) в общей сети или на сервере. Sony также добавила, что в некоторых реализациях системы игровой сервер может быть частью облачной игровой системы, которая «рендерит и передает потоковое видео» между каждым пользовательским устройством.
