Sony Патенты Внутриигровой переводчик жестового языка

Патент Sony: внутриигровой переводчик языка жестов позволяет глухонемым игрокам играть в игры!

Sony подала заявку на патент, чтобы обеспечить лучшую доступность игр для глухих геймеров. В патенте показана технология, которая может переводить разные языки жестов в реальном времени в игре.

Запатентовано Sony: внутриигровой переводчик с американского языка жестов (ASL) на японский язык жестов (JSL)

Планируйте использовать VR-оборудование и работать через облачные игры

Этот патент, представленный Sony, добавляет в видеоигры возможности перевода на язык жестов в реальном времени. Патент под названием «Перевод языка жестов в виртуальных средах» демонстрирует технологию, которая может переводить американский язык жестов (ASL) на японский язык жестов (JSL), облегчая понимание японцами.

Sony заявляет, что ее цель — создать систему, которая поможет глухим игрокам вести внутриигровые разговоры, переводя язык жестов в реальном времени внутри игры. Технология, описанная в патенте, позволит виртуальным индикаторам или аватарам, отображаемым на экране, общаться на языке жестов в реальном времени. Система сначала переведет жесты на одном языке в текст, затем преобразует текст на другой указанный язык и, наконец, переведет полученные данные в жесты на другом языке.

«Варианты настоящего раскрытия относятся к способам и системам для захвата языка жестов одного пользователя (например, японца) и перевода языка жестов другому пользователю (например, говорящему по-английски)», — описывает Sony в патент. «Поскольку языки жестов различаются в зависимости от их регионального происхождения, языки жестов не являются универсальными языками. Это требует надлежащего захвата языка жестов одного пользователя, понимания его родного языка и создания родного языка жестов в качестве вывода для другого пользователя». 🎜>

Sony объяснила один из способов реализации этой системы: с помощью VR-оборудования или головных дисплеев (HMD). «В некоторых вариантах реализации HMD подключается к пользовательскому устройству, такому как персональный компьютер, игровая консоль или другое вычислительное устройство, через проводное или беспроводное соединение», — уточняет Sony. «В некоторых вариантах реализации пользовательское устройство отображает графику, отображаемую через HMD, предоставляя пользователю захватывающий опыт просмотра виртуальной среды». Sony также предложила, чтобы одно пользовательское устройство могло беспрепятственно взаимодействовать с другим пользовательским устройством на игровом сервере через сеть. «В некоторых вариантах реализации игровой сервер выполняет общий сеанс видеоигры, поддерживает каноническое состояние видеоигры и ее виртуальной среды», — заявила Sony, — «и пользовательское устройство синхронизируется с ними относительно состояния виртуальной среды». .»

Благодаря этой настройке пользователи могут использовать одну и ту же виртуальную среду (например, игру) и взаимодействовать друг с другом в общей сети или на сервере. Sony также заявила, что в некоторых реализациях системы игровой сервер может быть частью облачной игровой системы, которая сможет «рендеринговать и транслировать видео» между каждым пользовательским устройством.