Het baanbrekende patent van Sony introduceert een in-game gebarentaalvertaler, die de toegankelijkheid voor dove gamers verbetert. Deze innovatieve technologie, beschreven in een patent met de titel "VERTALING VAN GEBARENTAAL IN EEN VIRTUELE OMGEVING", maakt realtime vertaling mogelijk tussen verschillende gebarentalen, zoals Amerikaanse gebarentaal (ASL) en Japanse gebarentaal (JSL).
Het systeem functioneert door eerst gebarentaalgebaren vast te leggen, deze in tekst om te zetten, de tekst in de doeltaal te vertalen en uiteindelijk de vertaalde tekst weer te geven als de overeenkomstige gebarentaalgebaren. Dit proces overwint de inherente beperkingen van de geografische variaties van gebarentalen en zorgt voor inclusieve gameplay voor een breder publiek.
Sony overweegt deze technologie te implementeren met behulp van VR-headsets of head-mounted displays (HMD's), die draadloos of bekabeld kunnen worden aangesloten op een gameconsole of pc. Het systeem zou naadloos kunnen worden geïntegreerd met cloud-gamingplatforms, waardoor realtime interactie tussen gebruikers in gedeelde virtuele omgevingen mogelijk wordt. Deze servergebaseerde aanpak synchroniseert spelstatussen tussen gebruikersapparaten, waardoor een soepele en consistente ervaring voor alle spelers wordt gegarandeerd, ongeacht hun moedertaal. Het voorgestelde systeem belooft een meer inclusieve en toegankelijke game-ervaring, waardoor communicatiebarrières voor dove gamers wereldwijd worden weggenomen.