Sony améliore l'accessibilité pour les joueurs sourds avec un traducteur de langue des signes nouvellement breveté en jeu. Cette technologie innovante facilite la traduction en temps réel entre les différentes langues de signe dans les jeux vidéo.
Sony brevets ASL au traducteur JSL pour les jeux vidéo
Tirer parti des technologies VR et Cloud Gaming
Le brevet de Sony, intitulé «Traduction de la langue des signes dans un environnement virtuel», détaille un système permettant une traduction en temps réel, par exemple, de la langue des signes américaine (ASL) à la langue des signes japonaise (JSL). Cela vise à combler les lacunes de communication pour les joueurs sourds lors des interactions en jeu. Les avatars à l'écran représenteront visuellement la langue des signes traduite en temps réel. Le processus implique une traduction en trois étapes: les gestes des signes sont d'abord convertis en texte, puis traduits en langue cible, et finalement rendu comme les gestes de la langue des signes correspondants.
Comme l'explique Sony dans le brevet: "Les implémentations de la présente divulgation concernent les méthodes et les systèmes de capture de la langue des signes d'un utilisateur (par exemple, japonais) et de traduction de la langue des signes à un autre utilisateur (par exemple, l'anglais). Parce que les langages de signe varient en fonction de la langue géographique, la langue des signes n'est pas universelle.
Sony envisage la mise en œuvre de ce système à l'aide des casques VR (HMDS) connectés aux PC, aux consoles de jeux ou à d'autres dispositifs informatiques. Le brevet décrit comment le HMD fournirait un gameplay immersif, le périphérique utilisateur rendrait les graphiques pour l'affichage.
En outre, Sony propose une communication transparente entre les appareils utilisateur et un serveur de jeux sur un réseau. Ce serveur de jeux gère l'état du jeu, synchronisant l'environnement virtuel sur les appareils connectés. Le brevet suggère également l'intégration avec les systèmes de jeu cloud, où le serveur rend et diffuse une vidéo, permettant des expériences de jeu partagées. Cette configuration permet aux utilisateurs d'interagir dans le même environnement virtuel sur un réseau ou un serveur partagé.
