Het baanbrekende patent van Sony stelt een in-game gebarentaalvertaler voor, die een revolutie teweegbrengt in de toegankelijkheid voor dove gamers. Deze innovatieve technologie, gedetailleerd beschreven in een patentaanvraag getiteld "VERTALING VAN GEBARENTAAL IN EEN VIRTUELE OMGEVING", richt zich op realtime vertaling tussen verschillende gebarentalen, zoals Amerikaanse gebarentaal (ASL) en Japanse gebarentaal (JSL).

Het systeem heeft tot doel communicatiekloven binnen videogames te overbruggen door gebarentaalgebaren in tekst te vertalen en die tekst vervolgens om te zetten in de doelgebarentaal. Dit proces omvat het vastleggen van de gebarentaalinvoer van de gebruiker, het identificeren van de brontaal en het genereren van overeenkomstige gebarentaaluitvoer voor een andere gebruiker. Het patent benadrukt de grote behoefte aan een dergelijk systeem, waarbij de niet-universaliteit van gebarentalen en de variërende geografische oorsprong worden erkend.

Sony heeft verschillende implementatiemethoden voor ogen. Eén benadering maakt gebruik van virtual reality (VR)-headsets of head-mounted displays (HMD's), die draadloos of bekabeld worden aangesloten op een pc, gameconsole of ander computerapparaat. Deze HMD's zouden meeslepende beelden bieden binnen de virtuele gameomgeving.

Verder stelt Sony een systeemarchitectuur voor die gebruik maakt van een gameserver voor naadloze communicatie tussen gebruikersapparaten. Deze server beheert de status van het spel, synchroniseert gebruikersapparaten en maakt gedeelde interacties binnen de virtuele omgeving mogelijk. Het patent stelt ook de integratie van deze technologie voor met cloud-gamingsystemen, waardoor het videoweergave- en streamingproces wordt gestroomlijnd. Hierdoor kunnen gebruikers communiceren binnen een gedeelde virtuele ruimte, ongeacht hun geografische locatie of gebarentaal. Het resultaat? Een meer inclusieve en toegankelijke game-ervaring voor dove spelers over de hele wereld.