Jak śledzenie wzroku i głowy pomaga graczom z niepełnosprawnościami

Gracze z różnymi niepełnosprawnościami rywalizują na najwyższym poziomie e-sportu. Od niewidomych graczy, takich jak BlindWarriorSven, po graczy z deformacjami dłoni, takich jak Spear3FW: jest wiele wspaniałych przykładów cyfrowych wojowników, którzy pokonali bariery fizyczne i psychiczne, by przebić się na profesjonalną scenę gier.

Gracze z niepełnosprawnościami stanowią dużą część graczy. Musieli jednak radzić sobie bez dostępu do technologii wspomagających, dostosowując się do jednego z największych wrogów: braku kontrolerów do gier dla graczy z niepełnosprawnościami.

Ograniczenia i potrzeba dostępnych kontrolerów do gier

Twórcy gier projektują kontrolery do gier wideo i ogólne interfejsy komputerowe głównie z myślą o użytkownikach bez niepełnosprawności. Wszyscy wiemy, jak wyglądają typowe kontrolery do konsol. Ich przyciski, pady i drążki są zaprojektowane pod przeciętny ludzki palec. Do tego ich rozmieszczenie jest dopasowane do sprawności dłoni przeciętnej osoby. Mimo to organizacje charytatywne i non-profit związane z grami, takie jak Everyone Can, Extra Life, Able Gamers, Special Effect, Gamers Outreach Foundation, Child’s Play Charity i Games for Change, zapewniają zasoby i działają na rzecz graczy z niepełnosprawnościami. Jeden z takich rzeczników, Steven Spohn z Able Gamers, doradza w sprawie technologii wspomagających, takich jak Xbox Adaptive Controller. Innym przykładem jest niezależne studio Soft Leaf Studios, które stworzyło Stories of Blossom dla dzieci z niepełnosprawnościami.

Na przykład utytułowany gracz SFV BrolyLegs pokonał te problemy, naciskając przyciski standardowego pada Xbox ustami i twarzą. On i inni gracze z niepełnosprawnościami kreatywnie i siłą woli zburzyli mury, które nie pozwalały im cieszyć się grami wideo. Tacy gracze są jednak wyjątkiem, a nie regułą.

Już w 2008 roku ponad 20,5% graczy okazjonalnych miało niepełnosprawność. Możemy tylko przypuszczać, że ta liczba wzrosła. Jednocześnie, jeśli wziąć pod uwagę, że około 60% gospodarstw domowych ma co najmniej jedną grę, a niemal jedna czwarta populacji zmaga się z ograniczeniami fizycznymi, które uniemożliwiają granie, możemy tylko wyobrazić sobie, ilu potencjalnych graczy nigdy nie spróbowało.

Jak czytamy na subreddicie Disabled Gamers, wyraźnie rośnie potrzeba dostępnych metod sterowania w grach. Choć jako dostawca rozwiązania do śledzenia głowy i wzroku nie jesteśmy bezstronni, uważamy, że odpowiedzią jest śledzenie wzroku i technologia śledzenia głowy.

Zastosowania śledzenia wzroku i głowy w grach

W skrócie: śledzenie wzroku i głowy polega na wykorzystaniu kamery do zamiany położenia oczu lub głowy na polecenia cyfrowe. Dzięki temu sygnały śledzenia można też przypisać do schematów sterowania w grach wideo.

Ta koncepcja nie jest nowa. W ogólnej obsłudze maszyn i komputerów wiele technologii śledzenia dało nowe możliwości użytkownikom z niepełnosprawnościami. Najsłynniejszym przykładem był Stephen Hawking, któremu czujnik ruchu policzka opracowany przez Intel pozwalał komunikować się za pomocą syntezy mowy. Postępy w śledzeniu wzroku dodatkowo poprawiają życie osób z ALS, takich jak profesor Hawking.

Granie to jednak nie to samo co codzienna praca na komputerze. Najczęściej wymaga precyzji i szybkich reakcji, by osiągnąć jakikolwiek sukces w sim racingu, strzelankach FPS i innych gatunkach gier na PC.

Najnowsze osiągnięcia, także dzięki działaczom na rzecz praw osób z niepełnosprawnościami, sprawiły jednak, że śledzenie głowy jest już wystarczająco szybkie do gier. Dzięki pomysłowemu projektowi i lepszej technologii kamer, takiej jak TrueDepth w iPhonie, sterowanie grą ruchami głowy jest dziś realną opcją w aplikacjach takich jak Eyeware Beam lub ze specjalnym sprzętem od TrackIR i Tobii.

Graczom z mniej poważnymi ograniczeniami fizycznymi śledzenie wzroku może pomóc skupić uwagę na ekranie. Obecnie streamerzy i twórcy treści używają eye trackerów, aby urozmaicić oglądanie swoim widzom, pokazując im bańkę na ekranie. Ten sam system może pomóc graczom, którzy mają problemy z koncentracją lub określone zaburzenia widzenia, lepiej zrozumieć, gdzie patrzą.

Śledzenie głowy ma już realne zastosowania jako interfejs w grach. Gracze, którzy lubią symulatory, takie jak Microsoft Flight Simulator, już używają head trackerów do sterowania kamerą.

To przełom dla graczy z niepełnosprawnościami, którym brakuje pełnej sprawności obu rąk. Połącz śledzenie głowy z najnowszymi dostępnymi kontrolerami do gier, a wiele osób z niepełnosprawnościami będzie mogło grać w gry o złożonym sterowaniu.

To nie jedyne przykłady technologii wspomagających. Graczom z niepełnosprawnościami pomagają też asystenci głosowi i urządzenia IoT, takie jak adapter CronusMAX zapewniający kompatybilność między platformami. Pandemia koronawirusa zmienia sposób pracy wielu osób i wygląd pokoju do grania, a jej dobrą stroną jest to, że urządzenia i oprogramowanie do komunikacji wspomagającej i alternatywnej (AAC) powstają szybciej i są traktowane jako coraz ważniejsze.

I ostatni pomysł: połączenie śledzenia głowy i wzroku może otworzyć niektóre gatunki gier dla graczy z ograniczoną sprawnością ruchową. Gry z kategorii grand strategy, city builder i strategii czasu rzeczywistego to najlepsze przykłady gier, które wymagają sprawnego używania urządzeń wskazujących. Na pierwszy rzut oka logicznym rozwiązaniem jest mysz z trackballem.

Problem w tym, że jest ona zaprojektowana z myślą o codziennych zadaniach. Precyzyjne przemieszczanie się z jednego końca dużej mapy na drugi staje się uciążliwe. Śledzenie głowy wykorzystuje ruchy głowy, dzięki czemu nasze działania są szybsze, naturalne i niewymagające wysiłku. Połączenie śledzenia głowy do przewijania ze śledzeniem wzroku do zaznaczania i precyzji wydaje się bardziej logicznym krokiem naprzód.

Nowoczesne śledzenie bez wysokich kosztów

Pewnie myślisz, że taka technologia kosztuje fortunę, bo wymaga specjalnej kamery i sprzętu. Takie eye trackery i head trackery istnieją, ale nie są jedyną opcją. Jak wspomnieliśmy, niektóre najnowsze smartfony mają w kamerach technologię, która analizuje głębię precyzyjniej niż kiedykolwiek. Dzięki temu powstały aplikacje, które zamieniają telefon w niedrogie urządzenie do śledzenia wzroku i głowy.

Choć nie wszystkie zastosowania z poprzedniej sekcji działają w takich aplikacjach od razu, deweloperzy mogą skorzystać z API do śledzenia głowy i wzroku, aby tworzyć własne oprogramowanie ze śledzeniem głowy i wzroku dla gier, symulatorów i urządzeń do komunikacji wspomagającej i alternatywnej (AAC), które rozwiążą problemy, na które nie ma jeszcze rozwiązań.

Dzięki takiemu otwartemu podejściu, opartemu na współpracy, studia i deweloperzy mogą otworzyć świat gier przed wieloma graczami z niepełnosprawnościami fizycznymi i intelektualnymi. W miarę jak instytucje i zespoły badają śledzenie wzroku i głowy w różnych kontekstach, wyniki takich projektów mogą też lepiej pokazać, jak ta technologia może stać się bardziej przydatna dla graczy z niepełnosprawnościami.

Aplikacja do śledzenia wzroku i głowy, taka jak Eyeware Beam, nie tylko ułatwia sterowanie w grach, ale też udostępnia tę technologię większej liczbie osób. Aplikacja zamienia iPhone'a lub iPada z wbudowaną kamerą TrueDepth w niezawodne, precyzyjne i wszechstronne narzędzie do śledzenia głowy i wzroku. Aplikacja działa jako źródło sygnału w ponad 200 grach na PC i umożliwia pełny zakres ruchu głowy w grze, dodając głębi dzięki responsywnemu, intuicyjnemu sterowaniu ruchami głowy, z którego korzysta wielu graczy z niepełnosprawnościami.

Ta technologia robi wrażenie: wykorzystuje Apple TrueDepth do stworzenia mapy głębi twarzy, rzutując 30 000 punktów podczerwieni, które rejestruje i przetwarza silnik neuronowy w chipie smartfona. Eyeware Beam wykorzystuje tę technologię do precyzyjnego określania pozycji głowy i sygnału śledzenia wzroku, porównywalnych z drogimi specjalistycznymi urządzeniami Tobii czy TrackIR.

Śledzenie wzroku w zasięgu ręki

Oprócz śledzenia głowy aplikacja zapewnia też dokładne śledzenie wzroku, dzięki czemu gracze mogą streamować rozgrywki na arenach online, w MOBA i inne treści z precyzyjną nakładką śledzenia wzroku na Twitchu, YouTube lub Facebooku, by w czasie rzeczywistym pokazywać widzom, gdzie patrzą. Przygotowanie smartfona do pracy jako tracker nie wymaga żadnego wysiłku.

Bez nieporęcznego czy dodatkowego sprzętu musisz zadbać jedynie o ustawienie telefonu. Potem płynna kalibracja pomoże Ci skonfigurować tracker i możesz grać jak najlepsi w Star Citizen, Digital Combat Simulator (DCS World) i Star Wars: Squadrons.

Gry to największa branża rozrywkowa na świecie. Naturalną konsekwencją tej wszechobecności jest to, że ludzie z różnych środowisk czynią z grania kulturę i styl życia, niezależnie od wieku czy pochodzenia.

Podsumowując: gry wideo to sztuka i hobby, z których każdy powinien móc korzystać. To także rosnący styl życia, który musi stać się bardziej inkluzywny dla wszystkich, od amerykańskich weteranów z niepełnosprawnościami po przeciętnego gracza. Zaawansowane technologie, takie jak śledzenie wzroku i głowy, oferują solidne rozwiązania, które pomagają zmniejszyć dystans osobom z niepełnosprawnościami, wciąż zmuszonym szukać skomplikowanych obejść, by móc grać. Granie nie musi być dla osób z niepełnosprawnościami tak dużym wyzwaniem ani czymś poza zasięgiem.