Simple Science

La science de pointe expliquée simplement

# Biologie# Neurosciences

Avancées dans le suivi des mouvements oculaires dans la recherche VR

Des chercheurs combinent le suivi oculaire et l'EEG en VR pour étudier le comportement humain.

― 8 min lire


Innovations en suiviInnovations en suivioculaire dans la VRréalité virtuelle et l'EEG.compréhension du comportement avec laDe nouvelles méthodes améliorent la
Table des matières

Au fil des ans, les chercheurs ont essayé de comprendre comment les gens se comportent dans des situations de la vie réelle. La plupart des études ont été faites dans des labos traditionnels, mais on s'inquiète de savoir si ces environnements contrôlés reflètent vraiment ce qui se passe en dehors. C'est important, car les résultats des études en labo ne s'appliquent pas toujours à la vie de tous les jours. Passer la recherche dans des contextes réels est un vrai défi, car ça mène souvent à des difficultés pour obtenir des résultats cohérents et comprendre les données recueillies.

Pour régler ces problèmes, les scientifiques commencent à utiliser la réalité virtuelle (RV) comme nouvel outil. La RV permet de réaliser des expériences détaillées où les participants peuvent agir librement tout en permettant aux chercheurs de garder le contrôle sur la situation, offrant ainsi des aperçus sur le comportement des gens dans différents scénarios. Cependant, pour que les études en RV soient efficaces, de nouvelles méthodes doivent être appliquées, particulièrement pour suivre les mouvements des yeux des participants.

Suivi des Mouvements Oculaires en RV

Dans la RV, il est essentiel de suivre où et comment les gens regardent. Les scientifiques ont développé une technologie de Suivi oculaire qui fonctionne bien dans des environnements plats en 2D, mais le suivi des mouvements oculaires dans des environnements 3D en RV est encore en cours de développement. Enregistrer les mouvements oculaires en RV peut être compliqué à cause des limites de la technologie, y compris des problèmes de qualité des données et de stabilité.

Des avancées récentes ont été faites dans le suivi des mouvements oculaires en 3D. Ces améliorations se concentrent souvent sur deux types de méthodes principales : le suivi basé sur la vitesse et le suivi basé sur la dispersion. Les méthodes basées sur la vitesse regardent la rapidité des mouvements oculaires, tandis que les méthodes basées sur la dispersion observent la répartition des mouvements oculaires. En améliorant ces méthodes, les chercheurs peuvent mieux capturer comment les gens regardent autour d’eux dans un cadre RV, ce qui est crucial pour une analyse précise.

Défis liés aux Données en RV

Un des principaux défis lors de ces expériences est de gérer le bruit dans les données, comme les fluctuations aléatoires causées par de petits mouvements des yeux ou le comportement des participants. Les chercheurs développent des stratégies pour segmenter les données enregistrées en plus petits segments, afin d'analyser les mouvements oculaires fluides et mieux interpréter les données collectées.

Un autre problème est que lorsque les gens portent des casques de RV, leurs mouvements oculaires ne donnent pas toujours une image claire de ce qu'ils regardent, surtout lorsqu'ils bougent la tête. Donc, il est important de prendre en compte ces mouvements pour avoir une compréhension précise de la direction de leur regard.

De plus, lorsque des enregistrements EEG (électroencéphalogramme) sont réalisés dans des scénarios de RV à vision libre, le timing devient un sujet complexe. Dans des configurations de laboratoire standard, les chercheurs contrôlent clairement le timing des stimuli visuels, ce qui facilite l’alignement des différents flux de données. En revanche, les configurations de vision libre manquent de cette structure, rendant les comparaisons à travers les essais plus compliquées. Les chercheurs travaillent à définir les mouvements oculaires plus précisément pour permettre une meilleure intégration des données EEG.

Mise en Place de l'Étude

Dans cette étude, les chercheurs ont cherché à combiner le suivi des mouvements oculaires avec les enregistrements EEG dans un environnement virtuel. Les participants ont été placés dans un cadre de ville en 3D et encouragés à explorer pendant que leurs mouvements oculaires et signaux EEG étaient enregistrés. Cette configuration visait à refléter une expérience plus réaliste, permettant aux chercheurs d’analyser comment les gens réagissent et se comportent lorsqu'on ne leur donne pas de tâches strictes.

Les participants ont été invités à agir comme s'ils attendaient un ami dans une zone désignée. Cette instruction visait à encourager un comportement naturel, leur permettant de regarder autour d'eux librement. Avant l'expérience réelle, les participants ont subi des tests pour s'assurer qu'ils étaient à l'aise dans l'environnement RV et que la technologie de suivi oculaire fonctionnait correctement.

Collecte et Analyse des Données

Pendant l'expérience, les données de suivi oculaire et les signaux EEG ont été collectés simultanément. Pour assurer une synchronisation précise des flux de données, plusieurs vérifications techniques ont été effectuées pour éviter des désalignements temporels potentiels. Les données de suivi oculaire ont été prétraitées pour filtrer les échantillons invalides, comme ceux résultant de clignements ou d'artéfacts de mouvement.

Les mouvements oculaires ont été classés soit en regards (lorsque les participants fixaient quelque chose) soit en Saccades (mouvements rapides entre les fixations). Deux méthodes différentes ont été utilisées pour la segmentation des données lors de l'analyse : une méthode basée sur les données et une méthode basée sur le temps. L'objectif était de déterminer quelle méthode fournirait des résultats meilleurs et plus fiables.

Les chercheurs ont également étudié les propriétés spatiales et temporelles des mouvements oculaires, vérifiant combien de temps les participants regardaient différents objets et à quelle rapidité ils déplaçaient leur regard. Cette analyse visait à fournir un aperçu de l'attention des participants pendant l'expérience et a permis aux chercheurs d'évaluer la qualité des données classées.

Analyse EEG et Résultats

Les données EEG collectées pendant l'expérience ont été analysées pour certaines réponses cérébrales, appelées potentiels évoqués liés aux événements (ERPs) et perturbations spectrales liées aux événements (ERSPs). Ces signaux cérébraux ont été examinés pour voir comment ils changeaient en réponse aux événements de regard, contribuant à comprendre comment le cerveau traite l'information visuelle pendant que les participants exploraient l'environnement RV.

Les résultats ont montré que les signaux cérébraux moyens s'alignaient bien avec la littérature existante, confirmant que la classification des mouvements oculaires était précise. Notamment, les chercheurs ont découvert que les ERSPs étaient moins sensibles aux problèmes de timing que les ERPs, indiquant que les ERSPs pourraient être plus adaptés pour étudier les gens dans des environnements naturels où le timing précis peut être difficile à contrôler.

Considérations Pratiques et Limitations

Bien que combiner le suivi des mouvements oculaires et les données EEG en RV soit prometteur, il y avait des défis rencontrés durant l'étude. Beaucoup de participants ont été rejetés de l'analyse finale pour diverses raisons, comme le mal des transports ou une mauvaise qualité des enregistrements EEG.

Pour améliorer la qualité des futures études, les chercheurs ont noté l'importance de bien préparer les participants, de garantir leur confort en utilisant la RV, et de gérer le potentiel de mal des transports. De plus, une planification soigneuse concernant la taille de l'échantillon est essentielle pour accommoder d'éventuels abandons.

De plus, les problèmes de stabilité d'enregistrement et d'alignement des différents flux de données doivent être gérés minutieusement pour garantir la fiabilité des résultats. La qualité globale des signaux EEG peut être affectée par les mouvements de tête, et les chercheurs doivent mettre en œuvre des techniques de prétraitement pour réduire le bruit dans les enregistrements.

Conclusion

Cette étude a souligné qu'il est en effet possible de combiner le suivi des mouvements oculaires et les données EEG dans un environnement virtuel pour des études d'exploration libre. Les résultats suggèrent que le suivi des mouvements oculaires en RV peut fournir des aperçus précieux sur le comportement humain et l'activité cérébrale. Les méthodes de classification des données développées dans cette recherche permettent une analyse significative des mouvements oculaires, avec des applications potentielles pour étudier l'attention, la perception et les processus cognitifs dans des contextes plus naturels.

Alors que la technologie RV continue d'avancer, elle présente des opportunités passionnantes pour explorer le comportement humain dans divers contextes, en allant au-delà des environnements de laboratoire traditionnels. En affinant les méthodes de suivi des mouvements oculaires et en les intégrant avec les enregistrements EEG, les chercheurs anticipent le potentiel de nouvelles découvertes pour comprendre comment on interagit et réagit à notre environnement en temps réel.

Source originale

Titre: Combining EEG and Eye-Tracking in Virtual Reality - Obtaining Fixation-Onset ERPs and ERSPs

Résumé: Extensive research conducted in controlled laboratory settings has prompted an inquiry into how results can be generalized to real-world situations influenced by the subjects actions. Virtual reality lends itself ideally to investigating complex situations but requires accurate classification of eye movements, especially when combining it with time-sensitive data such as EEG. We recorded eye-tracking data in virtual reality and classified it into gazes and saccades using a velocity-based classification algorithm, and we cut the continuous data into smaller segments to deal with varying noise levels, as introduced in the REMoDNav algorithm. Furthermore, we corrected for participants translational movement in virtual reality. Various measures, including visual inspection, event durations, and the velocity and dispersion distributions before and after gaze onset, indicate that we can accurately classify the continuous, free-exploration data. Combining the classified eye-tracking with the EEG data, we generated fixation-onset ERPs and ERSPs, providing further evidence for the quality of the eye movement classification and timing of the onset of events. Finally, investigating the correlation between single trials and the average ERP and ERSP identified that fixation-onset ERSPs are less time-sensitive, require fewer repetitions of the same behavior, and are potentially better suited to study EEG signatures in naturalistic settings. We modified, designed, and tested an algorithm that allows the combination of EEG and eye-tracking data recorded in virtual reality.

Auteurs: Debora Nolte, M. Vidal De Palol, A. Keshava, J. Madrid-Carvajal, A. L. Gert, E.-M. von Butler, P. Kömürlüoglu, P. König

Dernière mise à jour: 2024-04-28 00:00:00

Langue: English

Source URL: https://www.biorxiv.org/content/10.1101/2024.04.24.590885

Source PDF: https://www.biorxiv.org/content/10.1101/2024.04.24.590885.full.pdf

Licence: https://creativecommons.org/licenses/by-nc/4.0/

Changements: Ce résumé a été créé avec l'aide de l'IA et peut contenir des inexactitudes. Pour obtenir des informations précises, veuillez vous référer aux documents sources originaux dont les liens figurent ici.

Merci à biorxiv pour l'utilisation de son interopérabilité en libre accès.

Plus d'auteurs

Articles similaires