Améliorer la sécurité des conducteurs grâce à la surveillance de l'attention
Un nouveau système combine le suivi cardiaque et l'analyse de scène pour une conduite plus sûre.
― 7 min lire
Table des matières
La détection de saillance visuelle, c’est une façon de comprendre ce qui attire notre Attention dans le monde qui nous entoure. Ces dernières années, les chercheurs dans le domaine de l'automobile se sont intéressés à comment on porte attention en conduisant. En conduisant, les gens se concentrent naturellement sur certains objets, ce qui les aide à rester en sécurité sur la route. Cet article parle d'un système qui vise à améliorer la sécurité des conducteurs en combinant une méthode pour surveiller si un conducteur est somnolent avec une autre pour analyser ce qui se passe dans l’environnement de conduite.
Somnolence et de l'Attention
Surveillance de laLa somnolence peut être un facteur de risque énorme pour les accidents sur la route. De nombreuses études ont essayé de mesurer le niveau d’alerte d’un conducteur. Les chercheurs ont trouvé un lien entre l’attention et l’activité cardiaque, mesurée par la Variabilité de la Fréquence Cardiaque (VFC). En analysant la VFC, on peut mieux comprendre à quel point un conducteur est alerte. Cependant, il est crucial de prendre en compte les conditions de conduite lorsque l'on mesure l’attention. Par exemple, des situations à faible circulation et à basse vitesse nécessitent moins d’effort mental que des scénarios à haut risque comme les dépassements.
Pour mieux évaluer l’attention, ce système combine l’analyse visuelle de la scène de conduite avec une surveillance physiologique du conducteur. L’idée est de se concentrer sur les éléments importants dans l'environnement de conduite tout en gardant un œil sur l’alerte du conducteur. En utilisant cette approche combinée, on aide à réduire la charge de calcul et à améliorer les performances.
Travaux Connexes
Beaucoup d’études se sont penchées sur les manières de surveiller l'attention d'un conducteur et d'analyser les situations de conduite. Par exemple, certains chercheurs ont utilisé l'Électrocardiographie (ECG) pour mesurer l'activité cardiaque et déterminer la somnolence. Cependant, capturer le signal ECG nécessite plusieurs capteurs sur le corps du conducteur, ce qui peut être peu pratique. Pour y remédier, d'autres ont commencé à utiliser la PhotoPlethysmoGraphie (PPG), qui n'a besoin que d'un seul point de contact pour collecter des données.
Une autre étude a examiné la relation entre les signaux PPG et la fatigue du conducteur, avec succès. Les chercheurs ont aussi utilisé divers algorithmes pour analyser les rythmes cardiaques et les mouvements des yeux afin d'évaluer l'attention du conducteur. Malgré les avancées technologiques, des défis demeurent, notamment en ce qui concerne les différents facteurs environnementaux pouvant affecter les performances des systèmes de traitement d'images.
Système de Surveillance de l'Attention
Le cœur de ce système est le composant de surveillance de l'attention, qui capte le signal PPG du conducteur. Les signaux PPG nous donnent des infos sur l'activité cardiaque, ce qui peut refléter l'état général du corps et l’alerte. Ils se composent de deux parties : un signal AC qui correspond aux battements de cœur et un signal DC qui indique de légers changements dus à la respiration et à d'autres facteurs.
Pour capturer le signal PPG, un appareil éclaire la peau et mesure combien de lumière se reflète. Ce processus permet au système de détecter des changements de volume sanguin liés aux battements de cœur. Le dispositif est conçu pour être facile à utiliser, donc le conducteur peut l'utiliser sans problème en conduisant.
Plusieurs capteurs PPG sont placés sur le volant, permettant au conducteur de poser sa main sur l'un d'eux pour collecter des données. Le signal PPG brut est traité à l'aide d'un logiciel spécialisé, donnant un signal nettoyé prêt pour l'analyse.
Apprentissage profond et Traitement des Signaux
Les signaux PPG traités subissent une analyse avancée en utilisant des méthodes d'apprentissage profond. Un réseau de convolution temporelle unidimensionnelle est utilisé pour interpréter les données PPG et déterminer le niveau d'attention du conducteur. La sortie de ce système est un score entre 0 et 1, montrant à quel point le conducteur est alerte ou somnolent.
En plus, le système inclut un composant d'analyse vidéo qui capture la scène de conduite avec une caméra de qualité automobile. Un modèle d'apprentissage profond traite les images vidéo pour identifier les objets et générer une carte de saillance, mettant en évidence ce qui est le plus important dans la scène. La carte de saillance aide le système à comprendre les besoins d'attention du conducteur selon l'environnement.
Cette double approche, qui combine l'analyse PPG et la saillance de la scène, permet au système d'évaluer si le conducteur porte suffisamment attention à son environnement.
Combinaison des Données d'Attention
L'analyste d'attention du conducteur combine les infos du système PPG et de la carte de saillance. En faisant cela, le système peut aligner le niveau d'attention du conducteur avec les besoins de la situation de conduite. Si la carte de saillance indique une situation complexe ou à haut risque mais que le score d'attention du conducteur est bas, le système alertera le conducteur par un signal acoustique.
Pour assurer l’efficacité, les seuils pour déterminer les niveaux d’attention faible et élevée sont calibrés durant la phase d’entraînement. Cela permet au système de maximiser les performances selon les vraies conditions de conduite et de garantir une réponse adéquate aux différents scénarios.
Résultats Expérimentaux
Ce système a été testé avec un ensemble de données incluant diverses situations de conduite. Des enregistrements vidéo ont été réalisés avec une caméra haute résolution, capturant différents scénarios nécessitant différents niveaux d'attention. En tout, des données de 43 sujets ont été collectées durant les expériences, assurant une large gamme d’expériences de conduite et de niveaux d'attention.
Les données collectées ont été divisées en ensembles d'entraînement et de test pour entraîner efficacement le système de surveillance de l'attention. Les résultats montrent que combiner le signal PPG avec la carte de saillance est efficace pour évaluer l'alerte du conducteur. Le système peut comparer efficacement les niveaux d’attention du conducteur avec les exigences de la conduite, assurant une meilleure sécurité.
Dans les scénarios où le niveau d'attention du conducteur était faible dans une situation de conduite complexe, le système a fourni des alertes en temps opportun. Cette fonctionnalité est cruciale pour éviter les accidents causés par la somnolence ou la distraction.
Conclusion
Les résultats de cette étude démontrent le potentiel d'utiliser une approche combinée pour surveiller l'attention du conducteur et améliorer la sécurité. En se basant sur le signal PPG facilement accessible et en analysant la scène de conduite pour des éléments visuels saillants, ce système offre une solution proactive pour lutter contre la somnolence.
La dépendance du système à un design simple mais efficace lui permet de fonctionner sans avoir besoin de matériel complexe ou de ressources de calcul étendues. Cela le rend non seulement pratique pour des applications réelles mais aussi assure son intégration dans divers systèmes automobiles.
Les futurs travaux élargiront les capacités du système en collectant des données plus diversifiées et en améliorant son adaptabilité aux différentes situations de conduite. L'objectif est de créer un système d'assistance au conducteur robuste et efficace qui puisse garantir des expériences de conduite plus sûres pour tous sur la route.
Titre: Visual Saliency Detection in Advanced Driver Assistance Systems
Résumé: Visual Saliency refers to the innate human mechanism of focusing on and extracting important features from the observed environment. Recently, there has been a notable surge of interest in the field of automotive research regarding the estimation of visual saliency. While operating a vehicle, drivers naturally direct their attention towards specific objects, employing brain-driven saliency mechanisms that prioritize certain elements over others. In this investigation, we present an intelligent system that combines a drowsiness detection system for drivers with a scene comprehension pipeline based on saliency. To achieve this, we have implemented a specialized 3D deep network for semantic segmentation, which has been pretrained and tailored for processing the frames captured by an automotive-grade external camera. The proposed pipeline was hosted on an embedded platform utilizing the STA1295 core, featuring ARM A7 dual-cores, and embeds an hardware accelerator. Additionally, we employ an innovative biosensor embedded on the car steering wheel to monitor the driver drowsiness, gathering the PhotoPlethysmoGraphy (PPG) signal of the driver. A dedicated 1D temporal deep convolutional network has been devised to classify the collected PPG time-series, enabling us to assess the driver level of attentiveness. Ultimately, we compare the determined attention level of the driver with the corresponding saliency-based scene classification to evaluate the overall safety level. The efficacy of the proposed pipeline has been validated through extensive experimental results.
Auteurs: Francesco Rundo, Michael Sebastian Rundo, Concetto Spampinato
Dernière mise à jour: 2023-07-26 00:00:00
Langue: English
Source URL: https://arxiv.org/abs/2308.03770
Source PDF: https://arxiv.org/pdf/2308.03770
Licence: https://creativecommons.org/licenses/by/4.0/
Changements: Ce résumé a été créé avec l'aide de l'IA et peut contenir des inexactitudes. Pour obtenir des informations précises, veuillez vous référer aux documents sources originaux dont les liens figurent ici.
Merci à arxiv pour l'utilisation de son interopérabilité en libre accès.