Patent Sony: wbudowany w grę tłumacz języka migowego zapewnia lepsze wrażenia z gry graczom z wadą słuchu!
Sony złożyło wniosek patentowy, aby poprawić dostępność gier dla graczy z wadą słuchu. Patent demonstruje technologię, która może tłumaczyć różne języki migowe w grach w czasie rzeczywistym.
Korzystanie ze sprzętu VR i technologii gier w chmurze w celu uzyskania tłumaczenia w czasie rzeczywistym
Patent zatytułowany „Interpretacja języka migowego w środowiskach wirtualnych” opisuje technologię, która może przetłumaczyć amerykański język migowy (ASL) na japoński język migowy (JSL), ułatwiając w ten sposób komunikację między użytkownikami języka japońskiego a graczami posługującymi się językiem ASL.
Sony zamierza zbudować system, który pomoże graczom z wadą słuchu, tłumacząc język migowy w czasie rzeczywistym podczas rozmów w grze. Technologia opisana w patencie umożliwiłaby wyświetlanie na ekranie wirtualnego wskaźnika lub awatara przekazywania języka migowego w czasie rzeczywistym. System najpierw tłumaczy gesty w jednym języku na tekst, następnie konwertuje tekst na inny określony język, a na koniec tłumaczy otrzymane dane na gesty w innym języku.
Sony wyjaśnia w patencie: „Przykłady wykonania niniejszego ujawnienia dotyczą sposobów i systemów przechwytywania języka migowego jednego użytkownika (np. osoby mówiącej po japońsku) i tłumaczenia języka migowego innego użytkownika (np. osoby mówiącej po angielsku) Ponieważ języki migowe różnią się w zależności od regionu, wymaga to odpowiedniego przechwycenia języka migowego jednego użytkownika, zrozumienia jego języka ojczystego i wygenerowania jego ojczystego języka migowego jako danych wyjściowych dla innego użytkownika ”
Jedną z metod wdrożenia zaproponowaną przez firmę Sony jest użycie sprzętu VR lub wyświetlaczy montowanych na głowie (HMD). Szczegóły Sony: „W niektórych przykładach wykonania HMD jest podłączony do urządzenia użytkownika, takiego jak komputer osobisty, konsola do gier lub inne urządzenie komputerowe, za pośrednictwem połączenia przewodowego lub bezprzewodowego. W niektórych przykładach urządzenie użytkownika renderuje grafikę wyświetlaną za pośrednictwem HMD dla użytkownika Zapewnij wciągające wrażenia wizualne w środowisku wirtualnym ”
.Firma Sony zaproponowała ponadto, aby jedno urządzenie użytkownika mogło bezproblemowo komunikować się z innym urządzeniem użytkownika na serwerze gry za pośrednictwem sieci. Sony stwierdziło: „W niektórych przykładach serwer gry wykonuje wspólną sesję gry wideo, utrzymuje stan kanoniczny gry wideo i jej środowiska wirtualnego, a urządzenie użytkownika synchronizuje się z nim pod względem stanu środowiska wirtualnego”.
Dzięki tej konfiguracji użytkownicy mogą udostępniać i wchodzić w interakcję z tym samym środowiskiem wirtualnym (tj. grą) we współdzielonej sieci lub serwerze. Sony powiedziało również, że w niektórych wdrożeniach systemu serwer gier może stanowić część systemu gier w chmurze, który „renderuje i przesyła strumieniowo wideo” pomiędzy każdym urządzeniem użytkownika.