Comment le suivi de la tête et des yeux aide les joueurs handicapés à progresser

Des joueurs atteints de handicaps très divers participent aux compétitions d'esport au plus haut niveau. Des joueurs aveugles comme BlindWarriorSven aux joueurs atteints de malformations des mains comme Spear3FW, nombreux sont les guerriers du numérique qui ont surmonté des barrières physiques et mentales pour percer sur la scène du jeu professionnel.

Les joueurs en situation de handicap représentent une part importante des joueurs. Pourtant, ils ont dû faire sans grand-chose en matière de technologies d'assistance, en s'adaptant à l'un de leurs pires ennemis : le manque de manettes de jeu adaptées aux joueurs handicapés.

Les limites et le besoin de manettes de jeu accessibles

Les développeurs conçoivent les manettes de jeu vidéo et les interfaces informatiques en général d'abord pour des utilisateurs valides. Nous avons tous vu à quoi ressemblent les manettes de console classiques. Leurs boutons, croix directionnelles et sticks sont pensés pour un doigt humain moyen. En plus de cela, leur position est optimisée pour la dextérité de la main d'une personne moyenne. Malgré cela, des associations et des organisations à but non lucratif liées au jeu vidéo comme Everyone Can, Extra Life, Able Gamers, Special Effect, Gamers Outreach Foundation, Child's Play Charity et Games for Change fournissent des ressources et défendent les joueurs handicapés. L'un de ces défenseurs, Steven Spohn d'Able Gamers, conseille sur des technologies d'assistance comme la manette Xbox Adaptive Controller. Citons aussi le studio indépendant Soft Leaf Studios, qui a créé Stories of Blossom pour les enfants en situation de handicap.

Par exemple, le joueur de SFV multi-titré BrolyLegs a surmonté ces obstacles en utilisant sa bouche et son visage pour appuyer sur les boutons de sa manette Xbox standard. Lui et d'autres joueurs handicapés ont abattu avec créativité, par la seule force de leur volonté, les murs qui les empêchaient de profiter des jeux vidéo. Ces joueurs restent toutefois l'exception, et non la règle.

Dès 2008, plus de 20,5 % des joueurs occasionnels avaient un handicap. On imagine que leur nombre n'a fait qu'augmenter. Par ailleurs, si l'on considère qu'environ 60 % des foyers possèdent au moins un jeu et que près d'un quart de la population fait face à des difficultés physiques qui l'empêchent de jouer, on imagine combien de joueurs potentiels ne se sont jamais lancés.

Le besoin de méthodes de contrôle accessibles est clairement croissant, comme on peut le lire sur le subreddit Disabled Gamers. Même si nous sommes partiaux en tant que fournisseur d'une solution de suivi de la tête et des yeux, nous pensons que la réponse se trouve dans le suivi oculaire et la technologie de suivi de la tête.

Les applications du suivi oculaire et du suivi de la tête dans le jeu vidéo

En résumé, le suivi oculaire et le suivi de la tête utilisent une caméra pour traduire la position de vos yeux ou de votre tête en commandes numériques. Ces signaux de suivi peuvent donc aussi être associés aux schémas de commande des jeux vidéo.

Le concept n'a rien de nouveau. Pour interagir avec les machines et les ordinateurs en général, de nombreuses technologies de suivi ont donné plus d'autonomie aux utilisateurs handicapés. L'exemple le plus célèbre est Stephen Hawking, dont le capteur de mouvement de la joue développé par Intel lui permettait de communiquer grâce à la synthèse vocale. Les progrès du suivi oculaire améliorent encore la vie des personnes atteintes de SLA, comme le professeur Hawking.

Mais jouer n'a rien à voir avec l'utilisation d'un PC pour les tâches quotidiennes. Le plus souvent, réussir un tant soit peu en sim racing, dans les jeux de tir à la première personne et dans d'autres genres de jeux PC exige une précision chirurgicale et des réflexes rapides.

Les progrès récents, portés par les défenseurs des droits des personnes handicapées, ont toutefois rendu le suivi de la tête assez rapide pour le jeu vidéo. Grâce à une conception astucieuse et à de meilleures caméras, comme la TrueDepth de l'iPhone, utiliser sa tête pour envoyer des commandes de jeu est désormais une option viable, avec des applications comme Eyeware Beam ou du matériel dédié de TrackIR et Tobii.

Pour les joueurs aux difficultés physiques moins lourdes, le suivi oculaire peut aider à maintenir l'attention sur l'écran. Aujourd'hui, des streamers et des créateurs de contenu utilisent des eye trackers pour enrichir l'expérience de visionnage de leur public en affichant une bulle à l'écran. Ce même système peut permettre aux joueurs qui ont du mal à se concentrer ou qui ont certains troubles de la vision de mieux comprendre où ils regardent.

Le suivi de la tête a déjà de vraies applications comme interface de jeu. En particulier, les amateurs de simulation, comme Microsoft Flight Simulator, utilisent déjà des trackers de tête pour contrôler la caméra.

Cela change la donne pour les joueurs handicapés qui manquent d'ambidextrie. Associez le suivi de la tête aux progrès récents des manettes de jeu accessibles, et beaucoup de personnes en situation de handicap pourront jouer à des jeux aux commandes complexes.

Ce ne sont pas les seuls exemples de technologies d'assistance. Les assistants vocaux et les appareils connectés, comme l'adaptateur de compatibilité croisée CronusMAX, aident aussi les joueurs handicapés. Alors que l'épidémie de coronavirus change la façon dont beaucoup de gens travaillent et l'allure de la pièce où l'on joue, le bon côté de cette épidémie est que des dispositifs et logiciels de communication améliorée et alternative (CAA) sont développés plus vite et avec un sentiment d'importance accru.

Dernière idée : associer le suivi de la tête et des yeux peut ouvrir certains genres aux joueurs dont la motricité est réduite. Les jeux de grande stratégie, de construction de villes et de stratégie en temps réel sont des exemples parfaits de jeux qui exigent une bonne maîtrise des dispositifs de pointage. À première vue, une solution logique serait la souris trackball.

Le problème, c'est qu'elle est conçue pour les tâches quotidiennes. Se déplacer avec précision d'un bout à l'autre d'une grande carte devient laborieux. Le suivi de la tête nous donne accès aux mouvements de notre tête, ce qui rend nos actions plus rapides, naturelles et sans effort. Associer le suivi de la tête pour le défilement au suivi oculaire pour la sélection et la précision semble l'étape suivante la plus logique.

Un suivi de pointe, sans les coûts

Vous pensez sans doute qu'une telle technologie coûte une fortune parce qu'elle exige une caméra et du matériel propriétaires. De tels eye trackers et trackers de tête existent bel et bien, mais ce ne sont pas les seules options. Comme nous l'avons vu, certains des smartphones les plus récents intègrent dans leurs caméras une technologie qui analyse la profondeur avec plus de précision que jamais. Ces avancées ont donné naissance à des applications qui transforment votre téléphone en dispositif de suivi oculaire et de suivi de la tête bon marché.

Toutes les applications évoquées dans la section précédente ne sont pas utilisables d'emblée dans ce type d'app, mais les développeurs peuvent accéder à une API de suivi de la tête et des yeux pour créer leurs propres logiciels de suivi de la tête et des yeux pour le jeu vidéo, les simulateurs et les dispositifs de communication améliorée et alternative (CAA), afin de résoudre des problèmes qui n'ont encore aucune solution.

Grâce à cette approche collaborative et ouverte, les studios et les développeurs peuvent aider à ouvrir les portes du jeu vidéo à de nombreux joueurs ayant un handicap physique ou mental. À mesure que les institutions et les équipes poursuivent leurs recherches sur le suivi oculaire et le suivi de la tête dans divers contextes, les résultats de ces projets peuvent aussi montrer comment rendre cette technologie plus adaptée aux joueurs handicapés.

En plus de rendre le jeu plus accessible en matière de commandes, une application de suivi oculaire ou de suivi de la tête comme Eyeware Beam, qui fait les deux, met cette technologie à la portée d'un plus grand nombre. L'application transforme votre iPhone ou votre iPad, avec sa caméra TrueDepth intégrée, en un outil fiable, précis et polyvalent de suivi de la tête et des yeux. L'application sert de source d'entrée pour plus de 200 jeux PC et permet toute l'amplitude des mouvements de tête en jeu, pour donner de la profondeur au jeu avec des commandes par mouvements de tête réactives et intuitives qui profitent à de nombreux joueurs handicapés.

Cette technologie est une véritable prouesse : la technologie TrueDepth d'Apple produit une carte de profondeur de votre visage en projetant 30 000 points infrarouges, enregistrés et traités par le moteur neuronal de la puce du smartphone. Eyeware Beam utilise cette technologie pour générer une position de la tête et un signal de suivi oculaire précis, comparables à ceux des coûteux appareils propriétaires de Tobii ou TrackIR.

Le suivi oculaire à la portée de tous

En plus du suivi de la tête, l'application offre un suivi oculaire précis, pour que les joueurs puissent streamer leurs parties d'arène en ligne, de MOBA ou tout autre contenu de jeu avec une surcouche de suivi oculaire précise sur Twitch, YouTube ou Facebook, et montrer en temps réel à leur public où ils regardent. Configurer votre smartphone transformé en tracker se fait sans effort.

Sans matériel encombrant ou supplémentaire, votre seul souci est de caler votre téléphone. Ensuite, un étalonnage fluide vous aide à configurer votre tracker, et vous voilà prêt à jouer avec les meilleurs dans Star Citizen, Digital Combat Simulator (DCS World) et Star Wars: Squadrons.

Le jeu vidéo est la plus grande industrie du divertissement de la planète. Conséquence naturelle de cette omniprésence, des personnes de tous horizons en font une culture et un mode de vie, quels que soient leur âge ou leur parcours.

En fin de compte, les jeux vidéo sont un art et un loisir dont tout le monde devrait pouvoir profiter. Mais c'est aussi un mode de vie en pleine croissance, qui doit devenir plus inclusif pour tous, des vétérans américains handicapés au joueur moyen. Des technologies avancées comme le suivi oculaire et le suivi de la tête offrent des solutions solides pour aider à combler l'écart pour les personnes en situation de handicap, qui doivent encore trouver des solutions de contournement complexes pour participer. Le jeu vidéo n'a pas à être un tel défi, ni hors de portée, pour les personnes handicapées.