Sony złożyło patent, aby zapewnić więcej funkcji ułatwień dostępu dla niesłyszących graczy. Patent wyjaśnia, w jaki sposób niektóre języki migowe można w grze przetłumaczyć na inny język migowy.
Patent Sony: opracowanie tłumacza amerykańskiego języka migowego na japoński język migowy dla gier wideo
Planowane jest wykorzystanie sprzętu VR i uruchomienie go poprzez gry w chmurze
Sony złożyło patent na dodanie do gier wideo tłumaczenia języka migowego w czasie rzeczywistym. Patent zatytułowany „Interpretacja języka migowego w środowiskach wirtualnych” demonstruje technikę, za pomocą której amerykański język migowy (ASL) może być przekazywany osobom mówiącym po japońsku za pomocą japońskiego języka migowego (JSL).
Sony twierdzi, że jego celem jest zbudowanie systemu, który pomaga niesłyszącym graczom poprzez tłumaczenie języka migowego w czasie rzeczywistym podczas rozmów w grach. Technologia opisana w patencie umożliwiłaby wyświetlanie na ekranie wirtualnego wskaźnika lub awatara przekazywania języka migowego w czasie rzeczywistym. System najpierw przetłumaczy gesty w jednym języku na tekst, następnie przekonwertuje tekst na inny określony język, a na koniec przetłumaczy otrzymane dane na gesty w innym języku.
„Przykłady wykonania niniejszego ujawnienia dotyczą sposobów i systemów przechwytywania języka migowego jednego użytkownika (np. Japończyka) i tłumaczenia języka migowego innemu użytkownikowi (np. osobie mówiącej po angielsku)” – opisuje Sony w patent. „Ponieważ języki migowe różnią się w zależności od regionu, języki migowe nie mają uniwersalnego zastosowania. Wymaga to odpowiedniego uchwycenia języka migowego jednego użytkownika, zrozumienia jego języka ojczystego i wygenerowania nowego języka migowego dla innego użytkownika w postaci wyjściowej w jego ojczystym języku migowym .”
Sony podało przykład, że jednym ze sposobów wdrożenia tego systemu jest użycie sprzętu typu VR lub wyświetlaczy montowanych na głowie (HMD). „W niektórych przypadkach HMD łączy się z urządzeniem użytkownika, takim jak komputer osobisty, konsola do gier lub inne urządzenie komputerowe, za pośrednictwem połączenia przewodowego lub bezprzewodowego” – podaje Sony. „W niektórych przykładach urządzenie użytkownika renderuje grafikę wyświetlaną za pośrednictwem HMD, zapewniając użytkownikowi wciągające wrażenia wizualne w środowisku wirtualnym.”
Firma Sony zaproponowała ponadto, aby jedno urządzenie użytkownika mogło bezproblemowo komunikować się z innym urządzeniem użytkownika na serwerze gry za pośrednictwem sieci. „W niektórych przykładach wykonania serwer gry wykonuje wspólną sesję gry wideo, utrzymuje stan kanoniczny gry wideo i jej środowiska wirtualnego” – stwierdziła Sony – „a stan urządzenia użytkownika w odniesieniu do środowiska wirtualnego jest z nim zsynchronizowany. „
Dzięki tej konfiguracji użytkownicy mogą udostępniać treści i wchodzić w interakcje w tym samym środowisku wirtualnym (tj. w grze) we współdzielonej sieci lub serwerze. Sony stwierdziło również, że w niektórych przykładach systemu serwer gier może stanowić część systemu gier w chmurze, który „renderuje i przesyła strumieniowo wideo” pomiędzy każdym urządzeniem użytkownika.