Sony Patenty Tłumacz języka migowego w grze

Patent Sony: wbudowany w grę tłumacz języka migowego umożliwia graczom niedosłyszącym płynną grę!

Sony złożyło wniosek patentowy, aby zapewnić większą dostępność gier dla graczy z wadą słuchu. Patent opisuje technologię umożliwiającą tłumaczenie w czasie rzeczywistym pomiędzy różnymi językami migowymi w grze.

Korzystanie ze sprzętu VR i technologii gier w chmurze w celu uzyskania tłumaczenia w czasie rzeczywistym

Patent zatytułowany „Tłumaczenie języka migowego w środowiskach wirtualnych” demonstruje technologię tłumaczenia amerykańskiego języka migowego (ASL) na japoński język migowy (JSL), dzięki czemu gracze mówiący po japońsku rozumieją graczy posługujących się tym językiem.

Celem firmy Sony jest zbudowanie systemu tłumaczącego język migowy w grze w czasie rzeczywistym, aby pomóc graczom z wadą słuchu komunikować się w grze. Patent opisuje technologię, która umożliwiłaby komunikację w języku migowym w czasie rzeczywistym za pomocą wirtualnego wskaźnika lub awatara wyświetlanego na ekranie. System najpierw tłumaczy gesty jednego języka migowego na tekst, następnie konwertuje tekst na inny wyznaczony język, a na koniec przekłada otrzymane dane na gesty w innym języku migowym.

„Przykłady wykonania niniejszego ujawnienia dotyczą sposobów i systemów przechwytywania języka migowego jednego użytkownika (np. użytkownika japońskojęzycznego) i tłumaczenia języka migowego innego użytkownika (np. użytkownika anglojęzycznego).” Sony opisuje w patencie. „Ponieważ języki migowe różnią się w zależności od regionu, języki migowe nie są językami uniwersalnymi. Wymaga to odpowiedniego uchwycenia języka migowego jednego użytkownika, zrozumienia jego języka ojczystego i wygenerowania jego ojczystego języka migowego jako danych wyjściowych dla innego użytkownika.”

Sony wyjaśnia w patencie jedną z możliwych metod wdrożenia: użycie sprzętu VR lub wyświetlaczy montowanych na głowie (HMD). „W niektórych przypadkach HMD łączy się z urządzeniem użytkownika, takim jak komputer osobisty, konsola do gier lub inne urządzenie komputerowe, za pośrednictwem połączenia przewodowego lub bezprzewodowego” – podaje Sony. „W niektórych przykładach urządzenie użytkownika renderuje grafikę wyświetlaną przez HMD, zapewniając użytkownikowi wciągające wrażenia wizualne w środowisku wirtualnym.”

Firma Sony zaproponowała ponadto, aby jedno urządzenie użytkownika mogło bezproblemowo komunikować się z innym urządzeniem użytkownika na serwerze gry za pośrednictwem sieci. „W niektórych przykładach wykonania serwer gry wykonuje wspólną sesję gry wideo, utrzymuje stan kanoniczny gry wideo i jej środowiska wirtualnego” – stwierdziła Sony – „a urządzenie użytkownika synchronizuje się z nią pod względem stanu środowiska wirtualnego .”

Dzięki tej konfiguracji użytkownicy mogą udostępniać treści i wchodzić w interakcje z innymi osobami w tym samym środowisku wirtualnym (tj. w grze) we współdzielonej sieci lub serwerze. Sony stwierdziło również, że w niektórych przykładach systemu serwer gier może stanowić część systemu gier w chmurze, który „renderuje i przesyła strumieniowo wideo” pomiędzy każdym urządzeniem użytkownika.