Sony-patent: In-game gebarentaalvertaler zorgt voor een betere game-ervaring voor slechthorende spelers!
Sony heeft een patentaanvraag ingediend om de toegankelijkheid van games voor slechthorende spelers te verbeteren. Het patent demonstreert technologie die verschillende gebarentalen in realtime in games kan vertalen.
VR-apparatuur en cloud-gamingtechnologie gebruiken om realtime vertaling te realiseren
Het patent, getiteld "Sign Language Interpretation in Virtual Environments", beschrijft een technologie die Amerikaanse gebarentaal (ASL) kan vertalen naar Japanse gebarentaal (JSL), waardoor de communicatie tussen Japanse sprekers en spelers die ASL gebruiken, wordt vergemakkelijkt.
Sony wil een systeem bouwen dat slechthorende spelers helpt door gebarentaal in realtime te vertalen tijdens in-game gesprekken. De technologie die in het patent wordt beschreven, zou het mogelijk maken dat een virtuele indicator of avatar op het scherm wordt weergegeven om gebarentaal in realtime over te brengen. Het systeem vertaalt gebaren in de ene taal eerst naar tekst, converteert de tekst vervolgens naar een andere opgegeven taal en vertaalt ten slotte de ontvangen gegevens naar gebaren in een andere taal.
Sony legt in het patent uit: “Belichamingen van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van de gebarentaal van één gebruiker (bijvoorbeeld een Japanse spreker) en het vertalen van de gebarentaal naar een andere gebruiker (bijvoorbeeld een Engelse spreker) Omdat gebarentalen variëren per regionale herkomst, vereist dit dat je de gebarentaal van de ene gebruiker op de juiste manier vastlegt, zijn moedertaal begrijpt en zijn moedertaal genereert als uitvoer voor een andere gebruiker ”
Een door Sony voorgestelde implementatiemethode is het gebruik van VR-apparatuur of head-mounted displays (HMD). Sony details: "In sommige uitvoeringsvormen is de HMD verbonden met een gebruikersapparaat, zoals een personal computer, gameconsole of ander computerapparaat, via een bekabelde of draadloze verbinding. In sommige uitvoeringsvormen geeft het gebruikersapparaat afbeeldingen weer die worden weergegeven via de HMD voor de gebruiker Zorg voor een meeslepende kijkervaring in een virtuele omgeving ”
.Sony stelde verder voor dat het ene gebruikersapparaat via het netwerk naadloos kan communiceren met een ander gebruikersapparaat op de gameserver. Sony zei: "In sommige uitvoeringsvormen voert de gameserver een gedeelde sessie van de videogame uit, handhaaft de canonieke status van de videogame en zijn virtuele omgeving, en synchroniseert het gebruikersapparaat daarmee met betrekking tot de status van de virtuele omgeving."
Met deze opstelling kunnen gebruikers dezelfde virtuele omgeving (d.w.z. game) delen en ermee communiceren op een gedeeld netwerk of server. Sony zei ook dat in sommige implementaties van het systeem de spelserver deel zou kunnen uitmaken van een cloud-spelsysteem dat "video rendert en streamt" tussen elk gebruikersapparaat.
