Sony Patenten In-game gebarentaalvertaler

Patent van Sony: In-game gebarentaalvertaler zorgt ervoor dat slechthorende spelers games soepel kunnen spelen!

Sony heeft een patentaanvraag ingediend om gamers met gehoorproblemen beter toegankelijk te maken. Het patent beschrijft technologie die real-time vertaling tussen verschillende gebarentalen binnen een game mogelijk maakt.

VR-apparatuur en cloud-gamingtechnologie gebruiken om realtime vertaling te realiseren

Het patent, getiteld 'Vertaling van gebarentaal in virtuele omgevingen', demonstreert een technologie voor het vertalen van Amerikaanse gebarentaal (ASL) naar Japanse gebarentaal (JSL), waardoor spelers die Japans spreken spelers die ASL gebruiken, kunnen begrijpen.

Het doel van Sony is om een ​​systeem te bouwen dat gebarentaal in realtime in de game vertaalt, zodat slechthorende spelers kunnen communiceren in de game. Het patent beschrijft technologie die realtime gebarentaalcommunicatie mogelijk maakt vanaf een virtuele indicator of avatar die op het scherm wordt weergegeven. Het systeem vertaalt gebaren in de ene gebarentaal eerst naar tekst, zet de tekst vervolgens om in een andere aangewezen taal en vertaalt ten slotte de ontvangen gegevens naar gebaren in een andere gebarentaal.

"Belichamingen van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van de gebarentaal van één gebruiker (bijvoorbeeld een Japanssprekende gebruiker) en het vertalen van de gebarentaal naar een andere gebruiker (bijvoorbeeld een Engelssprekende gebruiker)" Sony beschrijft in het patent. "Omdat gebarentalen variëren per regionale herkomst, zijn gebarentalen geen universele talen. Dit vereist het op de juiste wijze vastleggen van de gebarentaal van de ene gebruiker, het begrijpen van hun moedertaal en het genereren van hun moedertaal als uitvoer voor een andere gebruiker."

Sony legt in het patent een mogelijke implementatiemethode uit: het gebruik van VR-apparatuur of head-mounted displays (HMD). "In sommige uitvoeringsvormen maakt de HMD verbinding met een gebruikersapparaat, zoals een personal computer, gameconsole of ander computerapparaat, via een bekabelde of draadloze verbinding", legt Sony uit. "In sommige uitvoeringsvormen geeft het gebruikersapparaat afbeeldingen weer die worden weergegeven via de HMD, waardoor de gebruiker een meeslepende kijkervaring van de virtuele omgeving krijgt

Sony stelde verder voor dat het ene gebruikersapparaat via het netwerk naadloos kan communiceren met een ander gebruikersapparaat op de gameserver. "In sommige uitvoeringsvormen voert de gameserver een gedeelde sessie van de videogame uit, handhaaft de canonieke status van de videogame en zijn virtuele omgeving", zei Sony, "en synchroniseert het gebruikersapparaat daarmee met betrekking tot de status van de virtuele omgeving ."

Met deze opstelling kunnen gebruikers delen en communiceren met anderen in dezelfde virtuele omgeving (d.w.z. game) op een gedeeld netwerk of server. Sony zei ook dat in sommige uitvoeringsvormen van het systeem de spelserver deel zou kunnen uitmaken van een cloud-spelsysteem dat "video weergeeft en streamt" tussen elk gebruikersapparaat.