Suivi oculaire sur les casques VR (réalité virtuelle)

Mis à jour le
Eye Tracking on VR (Virtual Reality) headsets

Qu'est-ce que l'Eye Tracking ?

Le suivi oculaire est une technique utilisée pour surveiller et mesurer le mouvement des yeux d'une personne lorsqu'elle regarde et interagit avec des stimuli visuels, tels que des objets dans un monde physique ou virtuel. Cette technologie utilise du matériel et des logiciels spécialisés pour capturer les mouvements précis des yeux et analyser les données en temps réel. Le suivi oculaire est couramment utilisé dans des domaines tels que la psychologie, les neurosciences et l'interaction homme-machine pour comprendre comment les gens traitent et réagissent aux informations visuelles, grâce à sa capacité à fournir des informations sur les processus cognitifs tels que l'attention, la perception et la prise de décision. Ces dernières années, cette technologie est devenue de plus en plus populaire dans le domaine de la réalité étendue pour renforcer les appareils matériels et améliorer l'expérience des utilisateurs.

Comment fonctionne le suivi oculaire en VR ?

Parmi les différentes approches de suivi oculaire, la réflexion cornéenne au centre de la pupille (PCCR) est l'une des plus populaires. Dans un casque XR, le système de suivi oculaire se compose généralement d'une structure en forme d'anneau qui abrite des caméras et des sources lumineuses positionnées entre les yeux de l'utilisateur et l'écran. Les principaux algorithmes d'apprentissage automatique du système analysent le flux de la caméra et génèrent un flux continu de points de données en temps réel, notamment la taille de la pupille, le vecteur de regard et l'ouverture des yeux. Ces informations peuvent être utilisées pour évaluer la capacité d'une personne à suivre un stimulus, observer sa réaction à une scène et déterminer son intention, entre autres applications. Cette méthode est très précise et peut fournir des mesures précises des mouvements oculaires, ce qui la rend adaptée à un large éventail d'applications.

Source : Tobii

Suivi oculaire dans Pimax Crystal
La technologie de suivi oculaire Tobii, basée sur le PCCR, a été intégrée à une gamme de casques de réalité virtuelle et largement utilisée pour créer des appareils puissants, des expériences immersives et des informations exploitables dans les applications professionnelles et grand public. Pimax Crystal l'a également intégrée pour offrir aux consommateurs un casque plus puissant et une expérience de jeu incroyable.

Réglage automatique de l'IPD

Auparavant, il était difficile pour les joueurs de réalité virtuelle d'ajuster manuellement leur IPD (distance interpupillaire) et partager un casque de réalité virtuelle avec des amis ou des membres de la famille était peu pratique, car chacun avait sa propre mesure IPD. Cependant, grâce au suivi oculaire et à un moteur interne, Pimax Crystal peut s'ajuster automatiquement à l'IPD le plus approprié (allant de 58 mm à 72 mm) pour chaque individu, offrant ainsi la meilleure expérience de réalité virtuelle possible.

Réduction des étourdissements

De nos jours, de nombreux appareils de réalité virtuelle ne peuvent suivre que les mouvements de la tête de l'utilisateur et non ceux des yeux, ce qui provoque chez certains utilisateurs le mal des transports. Cela se produit parce que le cerveau humain est très sensible aux changements du champ visuel qui se produisent lorsque la tête tourne, en particulier lorsque le corps reste immobile. Même un petit retard dans la rotation relative du champ de vision peut provoquer un inconfort notable. Des recherches ont montré que ce retard ne peut pas dépasser 20 ms avant qu'il ne devienne perceptible par l'utilisateur. Nous utilisons le suivi oculaire dans le casque de réalité virtuelle Pimax Crystal pour résoudre ce problème, dans l'espoir de permettre aux changements dans le champ visuel d'être contrôlés par les mouvements des yeux plutôt que par ceux de la tête. Cela peut réduire le risque de mal des transports et offrir une expérience de réalité virtuelle plus confortable et plus immersive.

Rendu fovéal suivi par l'œil

La technologie de suivi oculaire optimise les appareils de réalité virtuelle en rendant les visuels fidèles à la vision humaine réelle. Elle permet de restituer la zone du point de regard avec une densité de pixels élevée tout en restituant la région périphérique avec une densité de pixels plus faible. Cette approche réduit considérablement la charge d'ombrage du GPU et permet d'utiliser les économies dans des domaines critiques comme l'activation d'un ombrage complexe, tout en maintenant des taux d'images/de rafraîchissement élevés et stables. Cela peut considérablement bénéficier aux expériences utilisateur dans des contenus très exigeants comme les jeux.

Interface et interactions basées sur le regard

Les appareils de réalité virtuelle intégrant le suivi oculaire révolutionnent la façon dont les gens jouent aux jeux vidéo. Par exemple, les jeux de tir peuvent désormais être contrôlés à l'aide des yeux, le curseur se verrouillant sur les cibles lorsque le joueur regarde et la lunette s'ajustant automatiquement lorsqu'un œil est fermé. De plus, l'intrigue du jeu peut changer en fonction de l'endroit où le joueur regarde, comme la navigation automatique sur la carte lorsque le joueur regarde un carrefour ou le déclenchement de différents événements lorsqu'il regarde différentes parties du PNJ. Le regard peut également être utilisé dans la navigation dans les menus, les menus disparaissant lorsqu'ils ne sont pas nécessaires et déclenchés uniquement par le mouvement des yeux, créant ainsi une interface de réalité virtuelle plus épurée.

Résumé

Bien que Pimax Crystal ne soit peut-être pas le premier à intégrer le suivi oculaire, nous nous engageons à offrir une clarté visuelle inégalée avec des capacités avancées de suivi oculaire à chaque joueur de réalité virtuelle. Notre objectif est de fournir une expérience de réalité virtuelle qui ne ressemble à rien de ce qui a été vu auparavant, et nous apprécions votre intérêt continu pour nos produits. Restez à l'écoute de notre prochain article de blog !

Mis à jour le