Le brevet révolutionnaire de Sony introduit un traducteur en langue des signes dans le jeu, améliorant ainsi l'accessibilité pour les joueurs sourds. Cette technologie innovante, détaillée dans un brevet intitulé « TRADUCTION DE LA LANGUE DES SIGNES DANS UN ENVIRONNEMENT VIRTUEL », facilite la traduction en temps réel entre différentes langues des signes, telles que la langue des signes américaine (ASL) et la langue des signes japonaise (JSL).
Le système fonctionne en capturant d'abord les gestes en langue des signes, en les convertissant en texte, en traduisant le texte dans la langue cible et enfin en restituant le texte traduit sous la forme des gestes en langue des signes correspondants. Ce processus surmonte les limites inhérentes aux variations géographiques des langues des signes, garantissant un gameplay inclusif pour un public plus large.
Sony envisage de mettre en œuvre cette technologie à l'aide de casques VR ou d'écrans montés sur la tête (HMD), se connectant sans fil ou filaire à une console de jeu ou à un PC. Le système pourrait s'intégrer de manière transparente aux plates-formes de jeux en nuage, permettant une interaction en temps réel entre les utilisateurs dans des environnements virtuels partagés. Cette approche basée sur serveur synchronise les états de jeu sur les appareils des utilisateurs, garantissant ainsi une expérience fluide et cohérente à tous les joueurs, quelle que soit leur langue des signes native. Le système proposé promet une expérience de jeu plus inclusive et accessible, éliminant les barrières de communication pour les joueurs sourds du monde entier.