Sony opatentowało przełomową technologię zaprojektowaną z myślą o zwiększeniu dostępności dla niesłyszących graczy. Ten innowacyjny system tłumaczy język migowy w czasie rzeczywistym w grach wideo, wypełniając luki w komunikacji pomiędzy graczami używającymi różnych języków migowych.

Patent zatytułowany „TŁUMACZENIE JĘZYKA MIGOWEGO W ŚRODOWISKU WIRTUALNYM” szczegółowo opisuje system umożliwiający konwersję amerykańskiego języka migowego (ASL) na japoński język migowy (JSL) i odwrotnie. To tłumaczenie w czasie rzeczywistym umożliwi niesłyszącym graczom płynne uczestnictwo w rozmowach w grze. Proces ten obejmuje trzyetapowe tłumaczenie: gesty migowe są najpierw konwertowane na tekst, następnie tłumaczone na język docelowy, a na koniec renderowane dla odbiorcy jako odpowiadające im gesty języka migowego.

Patent firmy Sony podkreśla krytyczną potrzebę istnienia takiego systemu, potwierdzając znaczne różnice między językami migowymi w różnych regionach geograficznych. Celem tej technologii jest dokładne przechwytywanie i interpretowanie języka migowego, zrozumienie języka ojczystego użytkownika przed wygenerowaniem odpowiedniego wyniku w języku migowym dla innego gracza.

Proponowana implementacja wykorzystuje urządzenia VR, takie jak wyświetlacze montowane na głowie (HMD), podłączone do urządzenia do gier użytkownika (komputera, konsoli itp.). Te HMD zapewniają wciągające wrażenia wizualne w wirtualnym środowisku gier. Ponadto Sony sugeruje integrację systemu z platformami do gier w chmurze, umożliwiając płynną komunikację między graczami za pośrednictwem sieci lub serwera. Serwer gry zarządzałby stanem gry i synchronizował środowisko wirtualne dla wszystkich podłączonych użytkowników, ułatwiając interakcję i komunikację w czasie rzeczywistym, niezależnie od położenia geograficznego czy różnic w języku migowym. To innowacyjne podejście może zrewolucjonizować dostępność i integrację w świecie gier.