Инновационный патент Sony представляет внутриигровой переводчик языка жестов, повышающий доступность игры для глухих геймеров. Эта инновационная технология, подробно описанная в патенте под названием «ПЕРЕВОД ЖЕСТОВОГО ЯЗЫКА В ВИРТУАЛЬНОЙ СРЕДЕ», облегчает перевод в реальном времени между различными языками жестов, такими как американский язык жестов (ASL) и японский язык жестов (JSL).
Система сначала фиксирует жесты языка жестов, преобразует их в текст, переводит текст на целевой язык и, наконец, отображает переведенный текст как соответствующие жесты языка жестов. Этот процесс преодолевает присущие ограничения географического разнообразия языков жестов, обеспечивая инклюзивный игровой процесс для более широкой аудитории.
Sony планирует реализовать эту технологию с помощью VR-гарнитур или головных дисплеев (HMD), подключаемых по беспроводной или проводной сети к игровой консоли или ПК. Система может легко интегрироваться с облачными игровыми платформами, обеспечивая взаимодействие между пользователями в режиме реального времени в общих виртуальных средах. Этот серверный подход синхронизирует игровые состояния на пользовательских устройствах, обеспечивая плавное и единообразное взаимодействие для всех игроков, независимо от их родного языка жестов. Предлагаемая система обещает более инклюзивный и доступный игровой опыт, разрушая коммуникационные барьеры для глухих геймеров во всем мире.