IA et imagerie médicale dans le diagnostic du COVID-19
Analyser le rôle de l'IA dans l'amélioration des évaluations de radiographies thoraciques pendant la pandémie de COVID-19.
― 8 min lire
Table des matières
- Imagerie Médicale et COVID-19
- Le Rôle de l'Intelligence Artificielle
- Évaluation des Outils d'IA en Afrique
- Design de l'Étude et Participants
- Collecte de Données
- Établissement de Normes de Référence
- Éthique et Confidentialité
- Changements Pendant l'Étude
- Analyse des Données
- Caractéristiques de la Population
- Évaluations des Radiologues
- Performance des Outils d'IA
- Observations au Fil du Temps
- Accord dans la Détection des Anomalies
- Implications pour les Futures Pandémies
- Points Clés
- Limites
- Conclusion
- Source originale
La pandémie de COVID-19 a changé le monde de plein de façons, surtout en matière de santé. Des millions de personnes sont mortes et les systèmes de santé ont eu du mal à fournir des services adéquats. Un vrai défi pendant cette pandémie, c'était le manque de coordination mondiale pour les tests et la vaccination, ce qui a fait que plein de gens n'ont pas eu les soins dont ils avaient besoin. Cette situation a probablement causé beaucoup de décès, pas juste à cause du COVID-19, mais aussi à cause d'autres maladies.
Imagerie Médicale et COVID-19
L'imagerie médicale joue un rôle clé dans le diagnostic du COVID-19 et d'autres problèmes respiratoires. Les radiographies thoraciques (CXRs) sont souvent utilisées pour évaluer les maladies respiratoires. Elles sont plus accessibles et moins chères que les tomodensitométries (CT), ce qui en fait un choix pratique pour de nombreux établissements de santé. Maintenant, des machines CXR numériques portables sont utilisées, surtout dans les zones avec beaucoup de tuberculose (TB), permettant un meilleur accès aux services d'imagerie en dehors des hôpitaux.
Cependant, interpréter les CXRs peut être difficile, surtout quand de nombreux patients présentent des symptômes respiratoires similaires. La pandémie a montré le besoin de nouvelles stratégies pour garantir des lectures précises, surtout dans les endroits où les Radiologues ne sont pas facilement disponibles.
Le Rôle de l'Intelligence Artificielle
Utiliser l'intelligence artificielle (IA) pour analyser les CXRs a montré du potentiel pendant la pandémie. Des recherches préliminaires ont montré que les algorithmes d'IA conçus pour le COVID-19 pouvaient atteindre une grande précision dans l'identification de la maladie. Ces outils d'IA ont été utilisés dans des contextes où la TB est courante, et beaucoup de développeurs ont adapté leur logiciel pour se concentrer sur le COVID-19 au fil de l'évolution de la pandémie.
Malgré cette promesse, de nombreux systèmes d'IA formés sur des données venant de l'extérieur de l'Afrique pourraient ne pas bien fonctionner pour les populations du continent. De plus, à mesure que la pandémie évoluait, les recommandations de santé ont commencé à s'éloigner de la dépendance sur l'imagerie comme première étape pour diagnostiquer le COVID-19, ce qui a limité notre compréhension de l'utilité de l'IA dans ce contexte.
Évaluation des Outils d'IA en Afrique
Le Malawi et la Zambie ont été à la pointe des stratégies de santé numérique pour améliorer les services de santé. Dans cette étude, on a voulu explorer comment les outils d'IA pour analyser les CXRs pouvaient aider à diagnostiquer le COVID-19 et d'autres problèmes pulmonaires dans ces pays.
On a mené une étude qui a regardé les CXRs de patients qui pourraient avoir le COVID-19. On a comparé les résultats de l'analyse par IA avec les évaluations faites par des radiologues et on les a testés par rapport aux résultats de laboratoire pour le COVID-19.
Design de l'Étude et Participants
L'étude a impliqué plusieurs centres de santé au Malawi et en Zambie. On a inclus des patients adultes présentant des symptômes de COVID-19 qui avaient reçu à la fois un test de laboratoire et une radiographie thoracique numérique dans les 72 heures. Les patients de moins de 18 ans et ceux sans données complètes n'ont pas été inclus.
On visait un échantillon de 500 patients de chaque pays, basé sur des données antérieures suggérant une différence notable dans la précision entre les systèmes d'IA et les lecteurs humains.
Collecte de Données
Les chercheurs ont examiné les dossiers des patients pour identifier les personnes éligibles. Les données ont été collectées et anonymisées pour l'analyse. On a rassemblé des images de radiographies thoraciques et on a veillé à ce que toute information identifiante soit supprimée avant de les partager avec l'équipe d'évaluation.
Établissement de Normes de Référence
Les cas de COVID-19 ont été confirmés sur la base des résultats de tests provenant de Laboratoires agréés. Les radiologues ont évalué les radiographies pour déterminer si les schémas observés étaient compatibles avec le COVID-19 ou d'autres conditions.
Les radiologues ont classé les radiographies en trois catégories : compatibles avec le COVID-19, anormales mais pas indiquatives de COVID-19, et normales. Pour notre analyse principale, on a pris en compte les évaluations des radiologues pour déterminer l'exactitude des outils d'IA.
Éthique et Confidentialité
L'étude a été examinée et approuvée par un comité éthique. Comme c'était rétrospectif, on n'a pas pu obtenir le consentement éclairé des participants. Toutes les données ont été anonymisées avant d'être analysées.
Changements Pendant l'Étude
Au départ, on avait prévu de comparer plusieurs algorithmes d'IA. Cependant, à mesure que la pandémie avançait, de nombreux développeurs de logiciels ont retiré leurs algorithmes COVID-19 du marché. Par conséquent, on s'est concentré sur l'évaluation de deux systèmes d'IA qui restaient disponibles pendant la pandémie.
Analyse des Données
Pour l'analyse principale, on a évalué la performance des deux outils d'IA par rapport aux résultats des tests de laboratoire. Les chercheurs ont préparé les images de radiographies pour l'analyse et ont enregistré les sorties du logiciel.
On a évalué à quel point les outils d'IA réussissaient à identifier les cas de COVID-19 par rapport aux radiologues. On a aussi regardé l'accord entre les systèmes d'IA et les radiologues pour classifier les radiographies comme normales ou anormales.
Caractéristiques de la Population
Au total, on avait 758 images de radiographies pour notre étude. Après filtrage pour l'éligibilité, on s'est retrouvé avec 671 images de participants avec des données complètes. Le groupe était principalement composé de Zambiens, avec la plupart des participants étant des hommes d'environ 51 ans.
Évaluations des Radiologues
Les radiologues ont évalué 460 images comme ayant des constatations typiques de COVID-19. Cependant, on a noté une grande différence de performance entre le Malawi et la Zambie. Cette disparité pourrait refléter des approches différentes pour lire les radiographies ou d'autres facteurs.
Performance des Outils d'IA
On a analysé la performance des outils d'IA en comparaison avec les évaluations des radiologues. Un outil d'IA a performé en dessous des radiologues, tandis que l'autre avait des résultats comparables. Cette différence de résultats souligne l'importance de données d'entraînement appropriées pour les outils d'IA.
Observations au Fil du Temps
À mesure que la pandémie de COVID-19 évoluait, la performance des deux outils d'IA et des radiologues humains a aussi changé. On a noté une baisse de la sensibilité avec l'émergence de nouveaux variants, en particulier Omicron. Cette observation souligne le besoin de mises à jour continues et de réentraînement des outils d'IA pour maintenir leur efficacité.
Accord dans la Détection des Anomalies
Les deux systèmes d'IA ont montré un fort accord avec les radiologues lorsqu'il s'agissait d'identifier les radiographies normales ou anormales. C'est particulièrement utile quand un radiologue identifie une radiographie comme normale, ce qui permet un triage plus efficace des patients qui n’ont pas besoin de tests supplémentaires.
Implications pour les Futures Pandémies
L'étude met en lumière le potentiel de l'IA dans l'interprétation des radiographies thoraciques. Elle montre que, lorsqu'elles sont formées avec des données appropriées, l'IA peut soutenir ou même égaler la performance des radiologues humains, surtout dans les zones où les radiologues sont limités.
Points Clés
Variation de Performance : L'étude a montré que l'efficacité des outils d'IA variait beaucoup, avec un outil perforant en dessous du niveau des radiologues experts.
Besoin d'Apprentissage Continu : À mesure que de nouveaux variants de COVID-19 émergeaient, la performance des algorithmes d'IA et des radiologues changeait, indiquant la nécessité d'ajustements constants des outils et pratiques.
Fort Accord avec les Radiologues : Les deux systèmes d'IA ont réussi à être d'accord avec les radiologues pour identifier si une radiographie montrait des anomalies, ce qui pourrait améliorer la gestion des patients.
Utilisation Future de l'IA : Les résultats suggèrent que l'IA pourrait être bénéfique lors de futures pandémies, surtout dans les environnements à ressources limitées. Cependant, il faut faire attention à développer et affiner ces outils en utilisant des données des populations locales.
Limites
Cette étude avait plusieurs limites. Le design rétrospectif peut ne pas refléter les défis de la population générale dans le diagnostic du COVID-19. On a noté des différences évidentes entre les performances des radiologues au Malawi et en Zambie, et le retrait de nombreux outils d'IA du marché a limité nos comparaisons. Enfin, des ajustements locaux aux algorithmes d'IA basés sur des données sanitaires spécifiques auraient pu améliorer leur performance, mais n'ont pas fait partie de cette étude.
Conclusion
En résumé, l'étude montre un potentiel pour utiliser l'IA dans l'imagerie médicale durant les crises sanitaires. Bien que des défis restent, surtout en assurant que les outils soient bien formés sur des populations diverses, il y a un potentiel pour que l'IA augmente les services de santé en réponse aux pandémies comme le COVID-19. Les connaissances acquises peuvent informer les futures stratégies d'utilisation efficace des outils numériques dans des contextes à ressources limitées.
Titre: A Comparison of CXR-CAD Software to Radiologists in Identifying COVID-19 in Individuals Evaluated for Sars CoV 2 Infection in Malawi and Zambia
Résumé: IntroductionAI based software, including computer aided detection software for chest radiographs (CXR-CAD), was developed during the pandemic to improve COVID-19 case finding and triage. In high burden TB countries, the use of highly portable CXR and computer aided detection software has been adopted more broadly to improve the screening and triage of individuals for TB, but there is little evidence in these settings regarding COVID-19 CAD performance. MethodsWe performed a multicenter, retrospective cross-over study evaluating CXRs from individuals at risk for COVID-19. We evaluated performance of CAD software and radiologists in comparison to COVID-19 laboratory results in 671 individuals evaluated for COVID-19 at sites in Zambia and Malawi between January 2021 and June 2022. All CXRs were interpreted by an expert radiologist and two commercially available COVID-19 CXR-CAD software. ResultsRadiologists interpreted CXRs for COVID-19 with a sensitivity of 73% (95% CI: 69%-76%) and specificity of 49% (95% CI: 40%-58%). One CAD software (CAD2) showed performance in diagnosing COVID-19 that was comparable to that of radiologists, (AUC-ROC of 0.70 (95% CI: 0.65-0.75)), while a second (CAD1) showed inferior performance (AUC-ROC of 0.57 (95% CI: 0.52-0.63)). Agreement between CAD software and radiologists was moderate for diagnosing COVID-19, and very good agreement in differentiating normal and abnormal CXRs in this high prevalent population. ConclusionsThe study highlights the potential of CXR-CAD as a tool to support effective triage of individuals in Malawi and Zambia during the pandemic, particularly for distinguishing normal from abnormal CXRs. These findings suggest that while current AI-based diagnostics like CXR-CAD show promise, their effectiveness varies significantly. In order to better prepare for future pandemics, there is a need for representative training data to optimize performance in key populations, and ongoing data collection to maintain diagnostic accuracy, especially as new disease strains emerge. Author SummaryDuring the COVID-19 pandemic, AI-based software was developed to help identify and manage cases, including software that assists in reading chest X-rays (CXR-CAD). This technology has also been used in high tuberculosis (TB) burden countries to screen and manage TB cases. However, theres limited information on how well these tools work for COVID-19 in these settings. This study examined chest X-rays from people at risk for COVID-19 in Zambia and Malawi to evaluate the performance of CXR-CAD software against expert radiologists and laboratory COVID-19 tests. The research included X-rays from 671 participants, reviewed by two AI software programs and radiologists. The results showed that radiologists had a sensitivity of 73% and specificity of 49% in detecting COVID-19. One AI software (CAD2) performed similarly to radiologists, while another (CAD1) performed worse. The agreement between the AI software and radiologists varied, but both were good at distinguishing between normal and abnormal X-rays. The study suggests that while AI tools like CXR-CAD show potential, their effectiveness can vary. To improve these tools for future pandemics, more representative training data and continuous data collection are necessary.
Auteurs: Matthew Arentz, S. Linsen, A. Kamoun, A. Gunda, T. Mwenifumbo, C. Chavula, L. Nchimunya, Y. Tsai, N. Mulenga, G. Kadewele, E. Nahache, V. Sunkutu, J. Shawa, R. Kadam
Dernière mise à jour: 2024-05-20 00:00:00
Langue: English
Source URL: https://www.medrxiv.org/content/10.1101/2024.05.19.24307603
Source PDF: https://www.medrxiv.org/content/10.1101/2024.05.19.24307603.full.pdf
Licence: https://creativecommons.org/licenses/by/4.0/
Changements: Ce résumé a été créé avec l'aide de l'IA et peut contenir des inexactitudes. Pour obtenir des informations précises, veuillez vous référer aux documents sources originaux dont les liens figurent ici.
Merci à medrxiv pour l'utilisation de son interopérabilité en libre accès.