Surveillance de l'attention humaine au travail avec des robots
La recherche met en avant l'importance de suivre l'attention humaine dans les milieux industriels.
― 8 min lire
Table des matières
Ces dernières années, des robots ont commencé à bosser aux côtés des humains dans des usines et d'autres lieux de travail. Cependant, ces robots ont du mal à capter à quel point les humains sont attentifs. C'est un gros souci parce que si un travailleur n'est pas concentré, des erreurs peuvent survenir, ce qui pourrait mener à des accidents ou des problèmes. Comprendre l'Attention humaine, c'est compliqué. Ça comprend comment on voit, se souvient de choses, résout des problèmes, et notre niveau de conscience.
Quand une personne perd sa concentration, ça peut causer de gros soucis dans des jobs qui demandent des tâches précises comme assembler des appareils électroniques ou faire fonctionner des machines. Les lapsus d'attention ne sont pas faciles à mesurer parce qu'ils viennent de différents signes comme où quelqu'un regarde, la position de sa tête, sa posture, et ce qui se passe autour. C'est pour ça que les scientifiques veulent suivre l'attention humaine avec divers capteurs.
Le besoin de surveiller l'attention
Les travailleurs doivent rester concentrés pour éviter des erreurs et assurer la sécurité au boulot. Si les lapsus d'attention passent inaperçus, les conséquences peuvent être graves, coûtant du temps, des ressources, et même des vies. L'attention humaine, c'est un état où quelqu'un prête une attention particulière à son travail et est prêt à agir en fonction de ce qu'il voit et entend.
Les lapsus d'attention varient d'une personne à l'autre et peuvent être causés par plusieurs facteurs comme la fatigue, les émotions, ou les Distractions de l'environnement. Par exemple, quand quelqu'un regarde son téléphone en bossant, il peut garder une posture et un regard stables, mais il est distrait. Ça complique le fait de dire quand il est concentré ou distrait sans des méthodes de suivi appropriées.
Pour mieux suivre l'attention, utiliser plusieurs types de capteurs ensemble peut donner une image complète de la concentration d'une personne. Par exemple, différents signes comme le clignement des yeux, le fait de détourner le regard, de bouger la tête ou les bras, parler, ou montrer des signes de fatigue donnent tous des indices sur l'attention d'une personne. En combinant des données sur les mouvements des yeux, les positions de la tête et les sons, les chercheurs peuvent mieux étudier l'attention et les lapsus.
Le processus de Collecte de données
Pour mieux comprendre et suivre l'attention des travailleurs, les chercheurs ont mis en place un processus pour collecter des données auprès de travailleurs effectuant des tâches d'assemblage. Dans ce scénario, un robot a été conçu pour aider les travailleurs en leur passant des pièces de téléphone. Pour cette étude, ils ont utilisé unsuivi oculaire et une caméra avec un micro pour recueillir des infos sur les travailleurs sans les interrompre.
Les données ont été collectées dans un environnement de travail réaliste. Ce cadre a permis aux chercheurs de suivre où le travailleur humain regardait, ses mouvements, et même les sons de l'environnement. Pour rendre la collecte de données efficace, les chercheurs ont créé un moyen d'annoter différents états d'attention, marquant quand un travailleur était concentré et quand il était distrait.
Après avoir mis en place l'environnement, les chercheurs ont ajouté des distractions pour voir comment elles affectaient l'attention. Par exemple, ils ont eu des bruits de claquements de mains, des travailleurs en mouvement, et des personnes regardant des appareils personnels. Ils ont collecté des infos sur comment ces distractions impactaient la capacité des travailleurs à se concentrer sur leurs tâches.
Les lapsus d'attention et leurs causes
Les lapsus d'attention peuvent arriver pour plusieurs raisons. La fatigue, les distractions, et des états émotionnels peuvent mener à une perte de concentration. Même si une personne regarde dans la bonne direction, elle peut ne pas se concentrer sur ses tâches. Ça veut dire que se fier uniquement aux méthodes de suivi oculaire pourrait ne pas attraper toutes les instances de distraction.
Parmi les signes courants de lapsus d'attention, on trouve le fait de fixer un seul point trop longtemps, détourner le regard de la tâche, des mouvements oculaires lents, fermer les yeux, ou cligner des yeux fréquemment. Les distractions peuvent venir de l'environnement, comme le bruit ou des distractions visuelles, ainsi que de l'état interne d'une personne, comme l'ennui ou un manque de motivation.
Les recherches montrent que comprendre l'attention nécessite de regarder différents facteurs qui fonctionnent ensemble. Ça veut dire qu'il faut suivre les mouvements oculaires, la position de la tête, les émotions, et ce qui se passe autour d'eux en même temps. Des méthodes simples qui ne regardent qu'un aspect de l'attention ne sont souvent pas fiables.
La collecte d'un ensemble de données pilote
Les chercheurs ont collecté un ensemble de données pilote pour explorer l'attention des travailleurs lors de tâches d'assemblage. Ils ont utilisé divers capteurs, y compris une caméra RGB-D, un micro, et un suivi oculaire. Le but était de recueillir des données sur comment un travailleur prêtait attention en assemblant un faux téléphone, avec l'aide d'un robot.
Au cours de ce processus, les chercheurs ont remarqué le besoin d'annoter soigneusement les états d'attention. Ils ont marqué différents moments dans la tâche d'assemblage, identifiant quand le travailleur était concentré et quand il était distrait. Cette annotation aide à créer une image plus claire des schémas d'attention au fil du temps.
Ils ont aussi pris en compte diverses distractions du monde réel pour s'assurer que les données collectées reflètent de vraies situations de travail. Les distractions comprenaient des bruits soudains, des interactions avec des collègues, et des distractions personnelles comme consulter un téléphone.
Analyse des données et résultats
Grâce à leurs efforts de collecte de données, les chercheurs ont expérimenté avec des méthodes existantes pour détecter des signes de fatigue et de somnolence. Ils ont regardé comment différents indicateurs comme la fréquence à laquelle une personne clignait des yeux ou si ses yeux étaient fermés pouvaient aider à identifier quand l’attention de quelqu'un faiblissait.
Cependant, ils ont constaté que ces méthodes avaient souvent du mal à refléter avec précision l'attention d'une personne durant de vraies tâches de travail. Se fier uniquement à ces mesures traditionnelles pourrait mener à des erreurs en remarquant les lapsus d'attention. Ça souligne l'importance d'une approche plus complète qui combine plusieurs sources de données.
L'ensemble de données pilote a montré que les lapsus d'attention dans un cadre de production peuvent être subtils et difficiles à remarquer. Les méthodes traditionnelles qui se concentrent uniquement sur les mouvements oculaires ou les positions de la tête ne donnent pas toujours des résultats fiables.
Directions futures en Surveillance de l'attention
Étant donné les limites observées dans l'ensemble de données pilote, les chercheurs prévoient d'élargir leur étude. Ils visent à collecter un ensemble de données plus important comprenant des participants plus divers et un plus large éventail de tâches. Cet ensemble de données plus grand aidera à améliorer la détection et la compréhension des lapsus d'attention dans différents scénarios.
En plus d'élargir leur ensemble de données, les chercheurs vont travailler à améliorer la synchronisation des différents capteurs utilisés durant la collecte de données. Ils prévoient également d'incorporer des technologies qui peuvent surveiller la posture corporelle et les mouvements des mains dans le cadre de leurs efforts de suivi de l'attention.
L'objectif est de développer un système fiable pour identifier les lapsus d'attention qui peut être utilisé dans de vrais environnements industriels. En améliorant la compréhension de l'attention humaine, ce travail peut mener à des interactions plus sûres et plus efficaces entre humains et robots dans le milieu de travail.
Conclusion
Alors que les robots continuent de faire partie de nos lieux de travail, comprendre l'attention humaine devient de plus en plus crucial. Les lapsus d'attention peuvent mener à des erreurs et des accidents, surtout dans des environnements qui nécessitent de hauts niveaux de concentration. En utilisant des capteurs avancés pour suivre divers signes d'attention, les chercheurs peuvent développer de meilleures façons de surveiller les interactions humains-robots. Pour l'avenir, améliorer l'exactitude et la fiabilité du suivi de l'attention est essentiel pour la sécurité des travailleurs et la productivité dans les environnements industriels.
Titre: Detecting Worker Attention Lapses in Human-Robot Interaction: An Eye Tracking and Multimodal Sensing Study
Résumé: The advent of industrial robotics and autonomous systems endow human-robot collaboration in a massive scale. However, current industrial robots are restrained in co-working with human in close proximity due to inability of interpreting human agents' attention. Human attention study is non-trivial since it involves multiple aspects of the mind: perception, memory, problem solving, and consciousness. Human attention lapses are particularly problematic and potentially catastrophic in industrial workplace, from assembling electronics to operating machines. Attention is indeed complex and cannot be easily measured with single-modality sensors. Eye state, head pose, posture, and manifold environment stimulus could all play a part in attention lapses. To this end, we propose a pipeline to annotate multimodal dataset of human attention tracking, including eye tracking, fixation detection, third-person surveillance camera, and sound. We produce a pilot dataset containing two fully annotated phone assembly sequences in a realistic manufacturing environment. We evaluate existing fatigue and drowsiness prediction methods for attention lapse detection. Experimental results show that human attention lapses in production scenarios are more subtle and imperceptible than well-studied fatigue and drowsiness.
Auteurs: Zhuangzhuang Dai, Jinha Park, Aleksandra Kaszowska, Chen Li
Dernière mise à jour: 2023-04-20 00:00:00
Langue: English
Source URL: https://arxiv.org/abs/2304.10588
Source PDF: https://arxiv.org/pdf/2304.10588
Licence: https://creativecommons.org/licenses/by/4.0/
Changements: Ce résumé a été créé avec l'aide de l'IA et peut contenir des inexactitudes. Pour obtenir des informations précises, veuillez vous référer aux documents sources originaux dont les liens figurent ici.
Merci à arxiv pour l'utilisation de son interopérabilité en libre accès.