Sony Patenten In-game gebarentaalvertaler

Patent van Sony: In-game gebarentaalvertaler zorgt ervoor dat dove en stomme spelers games kunnen spelen!

Sony heeft een patentaanvraag ingediend om dove gamers betere toegankelijkheid van games te bieden. Het patent toont een technologie die verschillende gebarentalen realtime in een game kan vertalen.

Gepatenteerd door Sony: in-game vertaler van Amerikaanse gebarentaal (ASL) naar Japanse gebarentaal (JSL)

Plan om VR-apparatuur te gebruiken en te werken via cloudgaming

Dit door Sony ingediende patent voegt real-time vertaalmogelijkheden in gebarentaal toe aan videogames. Het patent, getiteld "Sign Language Translation in Virtual Environments", demonstreert een technologie die Amerikaanse Gebarentaal (ASL) kan vertalen naar Japanse Gebarentaal (JSL), waardoor het voor Japanse sprekers gemakkelijker te begrijpen is.

Sony zegt dat het doel is om een ​​systeem te bouwen waarmee dove spelers in-game gesprekken kunnen voeren door gebarentaal in realtime in de game te vertalen. De technologie die in het patent wordt beschreven, zou het mogelijk maken dat virtuele indicatoren of avatars die op het scherm worden weergegeven, in realtime in gebarentaal kunnen communiceren. Het systeem vertaalt gebaren in de ene taal eerst in tekst, zet de tekst vervolgens om in een andere opgegeven taal en vertaalt ten slotte de ontvangen gegevens in gebaren in een andere taal.

"Belichamingen van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van de gebarentaal van één gebruiker (bijvoorbeeld een Japanner) en het vertalen van de gebarentaal naar een andere gebruiker (bijvoorbeeld een Engelstalige)", beschrijft Sony in de octrooi. "Omdat gebarentalen variëren afhankelijk van hun regionale herkomst, zijn gebarentalen geen universele talen. Dit vereist het op de juiste wijze vastleggen van de gebarentaal van de ene gebruiker, het begrijpen van hun moedertaal en het genereren van hun moedertaal als uitvoer voor een andere gebruiker." 🎜>

Sony legde één manier uit om dit systeem te implementeren: met behulp van VR-apparatuur of head-mounted displays (HMD). "In sommige uitvoeringsvormen maakt de HMD verbinding met een gebruikersapparaat, zoals een personal computer, gameconsole of ander computerapparaat, via een bekabelde of draadloze verbinding", legt Sony uit. "In sommige uitvoeringsvormen geeft het gebruikersapparaat afbeeldingen weer die worden weergegeven via de HMD, waardoor de gebruiker een meeslepende kijkervaring van de virtuele omgeving krijgt

Sony stelde verder voor dat het ene gebruikersapparaat via het netwerk naadloos kan communiceren met een ander gebruikersapparaat op de gameserver. "In sommige uitvoeringsvormen voert de gameserver een gedeelde sessie van de videogame uit, handhaaft de canonieke status van de videogame en zijn virtuele omgeving", zei Sony, "en synchroniseert het gebruikersapparaat daarmee met betrekking tot de status van de virtuele omgeving ."

Met deze opstelling kunnen gebruikers dezelfde virtuele omgeving (d.w.z. game) delen en met elkaar communiceren op een gedeeld netwerk of server. Sony zei ook dat in sommige implementaties van het systeem de spelserver deel zou kunnen uitmaken van een cloud-spelsysteem dat video zou kunnen weergeven en streamen tussen elk gebruikersapparaat.