Traducteur de la langue des signes de brevets Sony en jeu

Le brevet révolutionnaire de Sony vise à révolutionner l'accessibilité pour les joueurs sourds. Cette technologie innovante traduit les langages des signes dans les jeux vidéo, décomposant les barrières de communication et favorisant l'inclusivité.

Sony brevets ASL au traducteur JSL pour les jeux vidéo

Tirer parti des jeux VR et cloud pour la traduction sans couture

Le brevet de Sony, intitulé «Traduction de la langue des signes dans un environnement virtuel», détaille un système de traduction en langue des signes en temps réel pour les jeux vidéo. Imaginez jouer avec quelqu'un utilisant la langue des signes américaine (ASL), tandis qu'un joueur japonais voit la conversation parfaitement traduite en langue des signes japonaise (JSL). Cette technologie utilise des indicateurs virtuels ou des avatars à l'écran pour communiquer instantanément la langue des signes. Le processus implique une traduction en trois étapes: la langue des signes est d'abord convertie en texte, puis traduite en langue cible, et finalement renvoyée en tant que langue de signe correspondante.

Comme l'explique Sony dans le brevet: "Les implémentations de la présente divulgation concernent les méthodes et les systèmes de capture de la langue des signes d'un utilisateur (par exemple, japonais) et de traduction de la langue des signes à un autre utilisateur (par exemple, l'anglais). Parce que les langages de signe varient en fonction de la langue géographique, la langue des signes n'est pas universelle.

Sony envisage ce système travaillant avec des casques VR ou des écrans montés sur la tête (HMD). Ces HMD se connecteraient à l'appareil d'un utilisateur (PC, console de jeu, etc.), offrant une expérience de jeu immersive. Le brevet suggère un système où les périphériques utilisateur communiquent entre eux et un serveur de jeu sur un réseau. Ce serveur maintient l'état du jeu, assurant la synchronisation entre les joueurs. De plus, Sony propose l'intégration avec les jeux en nuage, permettant un streaming et une interaction transparentes entre les joueurs quel que soit le lieu.

Ce réseau ou serveur partagé permet aux joueurs d'interagir dans le même environnement virtuel. Sony suggère que le serveur de jeux pourrait faire partie d'un système de jeu cloud, rendu et diffusion vidéo sur l'appareil de chaque utilisateur, améliorant l'expérience globale de jeu et l'accessibilité pour les joueurs sourds dans le monde.