Przełomowy patent Sony obejmuje wbudowany w grę tłumacz języka migowego, rewolucjonizujący dostępność dla niesłyszących graczy. Ta innowacyjna technologia, opisana szczegółowo we wniosku patentowym zatytułowanym „TŁUMACZENIE JĘZYKA MIGOWEGO W ŚRODOWISKU WIRTUALNYM”, koncentruje się na tłumaczeniu w czasie rzeczywistym między różnymi językami migowymi, takimi jak amerykański język migowy (ASL) i japoński język migowy (JSL).

System ma na celu wypełnienie luk komunikacyjnych w grach wideo poprzez tłumaczenie gestów języka migowego na tekst, a następnie konwersję tego tekstu na docelowy język migowy. Proces ten obejmuje przechwytywanie danych wprowadzanych przez użytkownika w języku migowym, identyfikowanie języka źródłowego i generowanie odpowiednich wyników w języku migowym dla innego użytkownika. Patent podkreśla istotne zapotrzebowanie na taki system, uznając nieuniwersalność języków migowych i zróżnicowane pochodzenie geograficzne.

Sony przewiduje kilka metod wdrożenia. Jedno podejście wykorzystuje zestawy słuchawkowe rzeczywistości wirtualnej (VR) lub wyświetlacze nagłowne (HMD), łączące się bezprzewodowo lub przewodowo z komputerem osobistym, konsolą do gier lub innym urządzeniem komputerowym. Te HMD zapewnią wciągające efekty wizualne w wirtualnym środowisku gier.

Ponadto Sony sugeruje architekturę systemu wykorzystującą serwer gier w celu zapewnienia płynnej komunikacji między urządzeniami użytkownika. Serwer ten zarządza stanem gry, synchronizując urządzenia użytkowników i umożliwiając współdzielone interakcje w środowisku wirtualnym. Patent proponuje także integrację tej technologii z systemami gier w chmurze, usprawniając proces renderowania i przesyłania strumieniowego wideo. Umożliwiłoby to użytkownikom interakcję we wspólnej przestrzeni wirtualnej, niezależnie od ich położenia geograficznego i języka migowego. Wynik? Bardziej włączające i dostępne wrażenia z gry dla niesłyszących graczy na całym świecie.