Sony Patentierter In-Game-Gebärdensprachübersetzer

Sony-Patent: Gebärdensprachübersetzer im Spiel ermöglicht hörgeschädigten Spielern ein reibungsloses Spielen!

Sony hat einen Patentantrag eingereicht, um hörgeschädigten Spielern einen besseren Zugang zum Spielen zu ermöglichen. Das Patent beschreibt eine Technologie, die eine Echtzeitübersetzung zwischen verschiedenen Gebärdensprachen innerhalb eines Spiels ermöglicht.

Verwendung von VR-Geräten und Cloud-Gaming-Technologie zur Erzielung einer Echtzeitübersetzung

Das Patent mit dem Titel „Übersetzung der Gebärdensprache in virtuellen Umgebungen“ demonstriert eine Technologie zur Übersetzung der amerikanischen Gebärdensprache (ASL) in die japanische Gebärdensprache (JSL), die es Spielern, die Japanisch sprechen, ermöglicht, Spieler zu verstehen, die ASL verwenden.

Sonys Ziel ist es, ein System zu entwickeln, das Gebärdensprache im Spiel in Echtzeit übersetzt, um hörgeschädigten Spielern die Kommunikation im Spiel zu erleichtern. Das Patent beschreibt eine Technologie, die eine Kommunikation in Gebärdensprache in Echtzeit über einen virtuellen Indikator oder Avatar ermöglichen würde, der auf dem Bildschirm angezeigt wird. Das System übersetzt zunächst Gesten in einer Gebärdensprache in Text, wandelt den Text dann in eine andere bestimmte Sprache um und übersetzt schließlich die empfangenen Daten in Gesten in einer anderen Gebärdensprache.

„Ausführungsformen der vorliegenden Offenbarung beziehen sich auf Methoden und Systeme zum Erfassen der Gebärdensprache eines Benutzers (z. B. eines japanischsprachigen Benutzers) und zum Übersetzen der Gebärdensprache an einen anderen Benutzer (z. B. einen englischsprachigen Benutzer)“ Sony beschreibt im Patent. „Da Gebärdensprachen je nach regionaler Herkunft variieren, sind Gebärdensprachen keine universellen Sprachen. Dies erfordert die angemessene Erfassung der Gebärdensprache eines Benutzers, das Verstehen seiner Muttersprache und die Generierung seiner Muttersprache als Ausgabe für einen anderen Benutzer.“

Sony erläutert im Patent eine mögliche Implementierungsmethode: die Verwendung von VR-Geräten oder Head-Mounted-Displays (HMD). „In einigen Ausführungsformen stellt das HMD über eine kabelgebundene oder kabellose Verbindung eine Verbindung zu einem Benutzergerät her, beispielsweise einem Personalcomputer, einer Spielekonsole oder einem anderen Computergerät“, erläutert Sony. „In einigen Ausführungsformen rendert das Benutzergerät die über das HMD angezeigten Grafiken und bietet dem Benutzer ein immersives Seherlebnis der virtuellen Umgebung.“

Sony schlug außerdem vor, dass ein Benutzergerät über das Netzwerk nahtlos mit einem anderen Benutzergerät auf dem Spieleserver kommunizieren kann. „In einigen Ausführungsformen führt der Spieleserver eine gemeinsame Sitzung des Videospiels aus, behält den kanonischen Zustand des Videospiels und seiner virtuellen Umgebung bei“, sagte Sony, „und das Benutzergerät synchronisiert sich damit in Bezug auf den Zustand der virtuellen Umgebung.“ ."

Mit diesem Setup können Benutzer in derselben virtuellen Umgebung (z. B. Spiel) in einem gemeinsam genutzten Netzwerk oder Server Inhalte teilen und mit ihnen interagieren. Sony sagte außerdem, dass der Spieleserver in einigen Ausführungsformen des Systems Teil eines Cloud-Gaming-Systems sein könnte, das „Videos rendert und streamt“ zwischen jedem Benutzergerät.