Sony a déposé une demande de brevet pour offrir de meilleures fonctionnalités d'accessibilité aux jeux pour les joueurs sourds et muets. Le brevet montre comment une langue des signes peut être traduite dans une autre dans un jeu.
Brevet Sony : traducteur ASL vers JSL pour jeux vidéo
Il est prévu d'utiliser un équipement VR et de l'exécuter via des jeux cloud
Sony a déposé une demande de brevet pour ajouter la traduction en langue des signes en temps réel aux jeux vidéo. Le brevet, intitulé « Interprétation de la langue des signes dans des environnements virtuels », démontre une technique par laquelle la langue des signes américaine (ASL) peut être communiquée aux locuteurs japonais à l'aide de la langue des signes japonaise (JSL).
Sony affirme que son objectif est de créer un système qui aide les joueurs sourds en traduisant la langue des signes en temps réel lors des conversations en jeu. La technologie décrite dans le brevet permettrait à un indicateur virtuel ou à un avatar affiché sur l'écran de transmettre la langue des signes en temps réel. Le système traduit d'abord les gestes dans une langue en texte, puis convertit le texte dans une autre langue spécifiée et enfin traduit les données reçues en gestes dans une autre langue.
Sony décrit dans le brevet : "Les modes de réalisation de la présente invention concernent des procédés et des systèmes permettant de capturer la langue des signes d'un utilisateur (par exemple, un Japonais) et de traduire la langue des signes à un autre utilisateur (par exemple, un anglophone). " "Étant donné que les langues des signes varient selon l'origine régionale, les langues des signes ne sont pas universellement applicables. Cela nécessite de capturer de manière appropriée la langue des signes d'un utilisateur, de comprendre sa langue maternelle et de générer une nouvelle langue des signes comme sortie pour un autre utilisateur, adaptée à. leur langue des signes maternelle."
Comme l'explique Sony, le système pourrait être mis en œuvre à l'aide d'un appareil de type VR ou d'un visiocasque (HMD). "Dans certains modes de réalisation, le HMD est connecté à un appareil utilisateur, tel qu'un ordinateur personnel, une console de jeu ou un autre appareil informatique, via une connexion filaire ou sans fil", détaille Sony. "Dans certains modes de réalisation, l'appareil utilisateur restitue l'affichage. via les graphiques HMD, offrant aux utilisateurs une expérience visuelle immersive dans l’environnement virtuel. »
Sony a en outre proposé qu'un appareil utilisateur puisse communiquer de manière transparente avec un autre appareil utilisateur sur le serveur de jeu via le réseau. "Dans certains modes de réalisation, le serveur de jeu effectue une session partagée du jeu vidéo, maintient l'état canonique du jeu vidéo et de son environnement virtuel", a déclaré Sony, "et le dispositif utilisateur se synchronise avec celui-ci par rapport à l'état de l'environnement virtuel. ."
Avec cette configuration, les utilisateurs peuvent partager et interagir les uns avec les autres dans le même environnement virtuel (c'est-à-dire un jeu) sur un réseau ou un serveur partagé. Sony a également ajouté que dans certaines implémentations du système, le serveur de jeu pourrait faire partie d'un système de jeu en nuage qui « restitue et diffuse de la vidéo » entre chaque appareil utilisateur.
