Sony патентует переводчик ASL в JSL для видеоигр, предназначенный для использования устройств VR и работы через облачные игры
В Sony заявили, что стремятся создать систему, которая сможет помочь глухим геймерам посредством перевода жестовых языков в реальном времени во время внутриигровых разговоров. Технология, описанная в патенте, позволит виртуальным индикаторам или аватарам, отображаемым на экране, общаться на языке жестов в режиме реального времени. Система первоначально переводит жесты жестов одного языка в текст, затем преобразует текст в другой указанный язык и, наконец, переводит полученные данные в жесты жестов другого языка.
"Реализации настоящего изобретения относятся к методам и системам для захвата языка жестов одного пользователя (например, японского) и перевода языка жестов другому пользователю (например, английскому)», — описано Sony в патенте. «Поскольку языки жестов различаются в зависимости от географического происхождения, язык жестов не является универсальным. Это требует надлежащего захвата языка жестов одного пользователя, понимания родного языка и создания нового языка жестов в качестве вывода для другого пользователя на его родном языке жестов. ."
Один из способов реализации этой системы, как показано в Sony, — это использование VR-типа устройство или головной дисплей (HMD). «В некоторых реализациях HMD подключается через проводное или беспроводное соединение к пользовательскому устройству, такому как персональный компьютер, игровая консоль или другое вычислительное устройство», - пояснила Sony. «В некоторых реализациях пользовательское устройство отображает графику для отображения через HMD, который обеспечивает пользователю захватывающий просмотр виртуальной среды».Sony далее предложила, чтобы одно пользовательское устройство могло беспрепятственно взаимодействовать с другим пользовательским устройством через сеть с игровым сервером. «В некоторых реализациях игровой сервер выполняет общий сеанс видеоигры, поддерживая каноническое состояние видеоигры и ее виртуальной среды», — заявила Sony — «и с которой пользовательские устройства синхронизируются относительно состояние виртуальной среды."
Благодаря этой настройке пользователи могут совместно использовать и взаимодействовать друг с другом в одной и той же виртуальной среде, aka игре, через общую сеть или сервер. Sony дополнительно заявила, что в некоторых реализациях системы игровой сервер может быть частью облачной игровой системы, которая «рендерит и передает потоковое видео» между каждым пользовательским устройством.