Come il tracciamento oculare e della testa aiuta i giocatori con disabilità a salire di livello

Giocatori con disabilità di ogni tipo competono ai massimi livelli degli esport. Da giocatori non vedenti come BlindWarriorSven a gamer con malformazioni alle mani come Spear3FW, ci sono tanti esempi brillanti di guerrieri digitali che hanno superato barriere fisiche e mentali per sfondare nella scena del gaming professionistico.

I giocatori con disabilità sono una parte consistente dei gamer. Eppure ci sono riusciti senza molte tecnologie assistive a disposizione, adattandosi a uno dei loro peggiori nemici: la mancanza di controller per videogiochi pensati per i giocatori con disabilità.

I limiti e il bisogno di controller di gioco accessibili

Chi sviluppa giochi crea controller e interfacce per computer pensati soprattutto per utenti senza disabilità. Tutti abbiamo visto come sono fatti i tipici controller per console. Pulsanti, pad e levette sono progettati per adattarsi a un dito umano medio. Inoltre, la loro posizione è ottimizzata per la destrezza della mano di una persona media. Nonostante questo, enti benefici e organizzazioni non profit legate al gaming come Everyone Can, Extra Life, Able Gamers, Special Effect, Gamers Outreach Foundation, Child’s Play Charity e Games for Change offrono risorse e si battono per i giocatori con disabilità. Uno di questi sostenitori, Steven Spohn di Able Gamers, fa da consulente per tecnologie assistive come l'Xbox Adaptive Controller. Un altro è lo studio indie Soft Leaf Studios, che ha creato Stories of Blossom per bambini con disabilità.

Per esempio, il pluripremiato giocatore di SFV BrolyLegs ha superato questi problemi usando la bocca e il viso per premere i pulsanti del suo normale gamepad Xbox. Lui e altri giocatori con disabilità hanno abbattuto con creatività e pura forza di volontà i muri che impedivano loro di godersi i videogiochi. Questi giocatori, però, sono l'eccezione e non la regola.

Già nel 2008, oltre il 20,5% dei giocatori occasionali aveva una disabilità. Possiamo solo immaginare che il loro numero sia cresciuto. Allo stesso tempo, se si considera che circa il 60% delle famiglie ha almeno un gioco e che quasi un quarto della popolazione ha difficoltà fisiche che le impediscono di giocare, possiamo solo immaginare quanti potenziali giocatori non abbiano ancora fatto il grande passo.

È chiaro che c'è un bisogno crescente di metodi di controllo accessibili per i giochi, come leggiamo nel subreddit Disabled Gamers. Anche se siamo di parte, visto che offriamo una soluzione di tracciamento di testa e occhi, crediamo che la risposta stia nel tracciamento oculare e nella tecnologia di tracciamento della testa.

Applicazioni del tracciamento oculare e della testa nel gaming

In poche parole, il tracciamento oculare e il tracciamento della testa usano la tecnologia delle fotocamere per tradurre la posizione degli occhi o della testa in comandi digitali. Per questo, questi segnali di tracciamento si possono anche associare agli schemi di controllo dei videogiochi.

Il concetto non è nuovo. Nell'interazione con macchine e computer, molte tecnologie di tracciamento hanno dato più autonomia agli utenti con disabilità. L'esempio più famoso è Stephen Hawking, il cui sensore sulla guancia sviluppato da Intel gli permetteva di comunicare tramite sintesi vocale. I progressi nel tracciamento oculare migliorano ulteriormente la vita delle persone con SLA, come il professor Hawking.

Giocare, però, non è come usare un PC per le attività quotidiane. Il più delle volte servono una precisione millimetrica e riflessi rapidi per ottenere qualche risultato nel sim racing, negli sparatutto in prima persona e in altri generi di giochi per PC.

Grazie ai recenti progressi spinti da chi si batte per i diritti delle persone con disabilità, il tracciamento della testa è diventato abbastanza veloce da poter essere usato nel gaming. Grazie a un design intelligente e a una migliore tecnologia delle fotocamere, come la TrueDepth dell'iPhone, usare la testa per dare comandi nei giochi ora è un'opzione concreta con app come Eyeware Beam o con hardware dedicato di TrackIR e Tobii.

Per i giocatori con difficoltà fisiche meno gravi, il tracciamento oculare può aiutare a mantenere l'attenzione sullo schermo. Oggi streamer e content creator usano gli eye tracker per migliorare l'esperienza di visione del loro pubblico, mostrando una bolla sullo schermo. Lo stesso sistema può aiutare i giocatori che faticano a concentrarsi o che hanno specifici disturbi della vista a capire meglio dove stanno guardando.

Il tracciamento della testa ha già applicazioni reali come interfaccia di gioco. In particolare, chi ama le esperienze di simulazione, come Microsoft Flight Simulator, usa già gli head tracker come metodo di controllo della telecamera.

Per i giocatori con disabilità che hanno una ridotta destrezza delle mani, questo cambia le regole del gioco. Unisci il tracciamento della testa ad alcuni recenti sviluppi nei controller accessibili, e molte persone con disabilità potranno giocare a titoli con controlli complessi.

Questi non sono gli unici esempi di tecnologie assistive. Anche gli assistenti vocali e i dispositivi IoT come l'adattatore di compatibilità CronusMAX aiutano i giocatori con disabilità. Mentre l'epidemia di coronavirus cambia il modo di lavorare di molte persone e l'aspetto della stanza da gioco, il lato positivo è che i dispositivi e i software di comunicazione aumentativa e alternativa (CAA) vengono sviluppati più in fretta e con una maggiore consapevolezza della loro importanza.

Un'ultima idea: una combinazione di tracciamento di testa e occhi può aprire alcuni generi ai giocatori con capacità motorie ridotte. I giochi di grande strategia, di costruzione di città e di strategia in tempo reale sono esempi perfetti di giochi che richiedono un uso corretto dei dispositivi di puntamento. A prima vista, una soluzione logica è il mouse con trackball.

Il problema, però, è che è pensato per le attività quotidiane. Spostarsi con precisione da un lato all'altro di una grande mappa diventa scomodo. Il tracciamento della testa sfrutta i movimenti della testa, che rendono le azioni più rapide, naturali e senza sforzo. Combinare il tracciamento della testa per lo scorrimento con il tracciamento oculare per la selezione e la precisione sembra il passo avanti più logico.

Tracciamento all'avanguardia senza i costi

Probabilmente pensi che una tecnologia del genere costi una fortuna perché richiede fotocamere e hardware proprietari. Esistono eye tracker e head tracker di questo tipo, ma non sono l'unica opzione. Come abbiamo detto, alcuni degli smartphone più recenti integrano nelle fotocamere una tecnologia che analizza la profondità con una precisione mai vista prima. Questi progressi hanno reso possibili app che trasformano il telefono in un dispositivo economico per il tracciamento oculare e della testa.

Anche se non tutte le applicazioni della sezione precedente sono pronte all'uso in queste app, gli sviluppatori possono accedere a un'API di tracciamento di testa e occhi per creare software con tracciamento di testa e occhi per gaming, simulatori e dispositivi di comunicazione aumentativa e alternativa (CAA), e risolvere problemi che non hanno ancora una soluzione.

Grazie a questo approccio collaborativo e aperto, studi e sviluppatori possono aiutare ad aprire le porte del gaming a molti giocatori con disabilità fisiche e mentali. Man mano che istituzioni e team continuano a studiare il tracciamento oculare e della testa in contesti diversi, i risultati di questi progetti possono anche aiutare a capire come rendere la tecnologia più adatta ai giocatori con disabilità.

Oltre a rendere il gaming più accessibile dal punto di vista dei controlli, un'app di tracciamento oculare o della testa come Eyeware Beam fa entrambe le cose e mette la tecnologia alla portata di più persone. L'app trasforma il tuo iPhone o iPad con fotocamera TrueDepth integrata in uno strumento affidabile, preciso e versatile per il tracciamento di testa e occhi. L'app funziona come sorgente di input per oltre 200 giochi per PC e consente l'intera gamma di movimenti della testa nel gioco, aggiungendo profondità con controlli reattivi e intuitivi basati sui movimenti della testa, utili a molti giocatori con disabilità.

Questa tecnologia è un'impresa notevole: sfrutta la TrueDepth di Apple per creare una mappa di profondità del viso proiettando 30.000 punti infrarossi, registrati ed elaborati dal Neural Engine del chip dello smartphone. Eyeware Beam usa questa tecnologia per generare una posa della testa precisa e un segnale di tracciamento oculare paragonabili a quelli di costosi dispositivi proprietari di Tobii o TrackIR.

Il tracciamento oculare alla portata di tutti

Oltre al tracciamento della testa, l'app offre anche un tracciamento oculare preciso, così i giocatori possono trasmettere in diretta i loro contenuti di online arena, MOBA e di qualsiasi altro genere con un preciso overlay di tracciamento oculare su Twitch, YouTube o Facebook, per condividere con il pubblico, in tempo reale, il punto che stanno guardando. Configurare lo smartphone trasformato in tracker è semplicissimo.

Senza hardware ingombrante o aggiuntivo, l'unica cosa a cui pensare è sistemare il telefono. Dopodiché, una calibrazione semplice ti aiuterà a configurare il tracker e sarai pronto a giocare come i migliori in Star Citizen, Digital Combat Simulator (DCS World) e Star Wars: Squadrons.

Il gaming è l'industria dell'intrattenimento più grande del pianeta. Una conseguenza naturale di questa diffusione è che persone di ogni tipo trasformano il gaming in una cultura e uno stile di vita, indipendentemente dall'età o dalla provenienza.

In conclusione, i videogiochi sono un'arte e un hobby che tutti dovrebbero poter godere. Ma sono anche uno stile di vita in crescita che deve diventare più inclusivo per tutti, dai veterani americani con disabilità al gamer medio. Tecnologie avanzate come il tracciamento oculare e della testa offrono soluzioni solide per ridurre il divario per le persone con disabilità che devono ancora ricorrere a soluzioni complicate per partecipare. Per le persone con disabilità, giocare non deve essere una sfida così grande o qualcosa fuori dalla loro portata.