Interpretação Assistida por IA de Testes de COVID-19 em Casa
Um estudo sobre IA interpretando testes rápidos de COVID-19 de forma eficaz.
― 8 min ler
Índice
- Framework para Interpretação
- Coleta de Dados e Participantes
- Processo Passo a Passo
- Classificação do Cartão de Teste e Detecção de Resultados
- Identificando Resultados Inválidos
- Classificação dos Resultados
- Resultados do Estudo
- Visão Geral do Conjunto de Dados
- Desempenho do Sistema
- Importância de Dados do Mundo Real
- Desafios e Considerações
- Problemas com Resultados Inválidos
- Observações sobre Métodos de Detecção
- Implicações para Sistemas Futuros
- Limitações do Estudo
- Conclusão
- Fonte original
A pandemia de COVID-19 deixou claro que precisamos de jeitos rápidos e eficazes de testar o vírus. Testes rápidos que detectam o vírus podem ajudar a identificar casos Positivos mais cedo, permitindo isolamento mais ágil e controle da disseminação. Esses testes são feitos pra ser fáceis de usar em casa, dando resultados em cerca de 15 minutos. Mas alguns testes rápidos têm mostrado mais resultados falso-Negativos do que outros que usam métodos mais complexos. Isso torna super importante interpretar os resultados desses testes rápidos corretamente.
Podem surgir problemas na hora de interpretar os testes. Por exemplo, linhas de teste fracas podem ser difíceis de ver, ou as pessoas podem interpretar os resultados de forma errada com base em como se sentem ou se estiveram perto de alguém diagnosticado com o vírus. Além disso, se um teste mostrar resultados estranhos que não se encaixam nas expectativas, isso pode confundir os usuários, fazendo eles acharem que estão negativos quando na verdade podem estar positivos. E ainda, pessoas com dificuldades de visão podem ter dificuldade em ler os resultados claramente. Por isso, é crucial minimizar tanto os falso-negativos quanto os falso-positivos.
A inteligência artificial (IA) tem sido sugerida como uma ferramenta útil pra ajudar a reduzir esses problemas de interpretação com testes em casa. No entanto, a maioria das soluções de IA existentes foram desenvolvidas em condições controladas, o que pode criar desafios para usuários comuns que talvez não tenham a iluminação ou o fundo ideal ao tirar fotos de seus testes. Este estudo investiga como diferentes designs de testes podem afetar o desempenho do sistema de IA, com que frequência resultados inválidos ocorrem e como tornar esses testes mais fáceis de ler fora de um ambiente de laboratório.
Framework para Interpretação
Este artigo discute um novo sistema de IA que usa técnicas de aprendizado de máquina e comparação de imagens para interpretar resultados de testes rápidos de COVID-19 feitos em casa. O sistema se baseia em uma grande coleção de mais de 51.000 imagens de resultados de testes tiradas por participantes de um projeto de pesquisa específico. A abordagem envolve várias etapas: primeiro, determinar qual tipo de cartão de teste está sendo utilizado; segundo, encontrar e isolar a parte do teste onde aparecem os resultados; terceiro, identificar testes inválidos; e por fim, avaliar o resultado como positivo, negativo ou incerto.
Coleta de Dados e Participantes
Pra desenvolver e testar o sistema, imagens de testes rápidos de antígeno foram coletadas de participantes em estudos financiados por um programa nacional de saúde. Apenas participantes com mais de dois anos que moravam nos EUA e tinham um smartphone podiam participar. Os participantes deram permissão pra entrar no estudo através de um aplicativo, que os guiou no uso do teste. Eles receberam kits de teste de três marcas diferentes e foram instruídos a completar os testes ao longo do estudo. Cada participante enviou uma foto dos resultados do teste pro aplicativo, onde os coordenadores do estudo então interpretaram os resultados.
Processo Passo a Passo
Classificação do Cartão de Teste e Detecção de Resultados
O sistema segue uma sequência específica de etapas. Primeiro, usa uma técnica de Correspondência de Imagens pra identificar qual tipo de cartão de teste está sendo usado. Em seguida, localiza e recorta a área de interesse no cartão de teste pra focar no resultado. Pra determinar o tipo de cartão de teste, são aplicadas técnicas avançadas de análise de imagem, que ajudam a reunir informações importantes sobre os testes. O sistema foi testado usando vários métodos de correspondência de imagem, e uma combinação se destacou, identificando corretamente a área de interesse em uma alta porcentagem de imagens.
Identificando Resultados Inválidos
Resultados inválidos são aqueles em que não se pode confiar, como testes que não mostram uma linha de controle. O sistema usa uma rede especial projetada pra diferenciar entre resultados válidos e inválidos. Foi constatado que diferentes marcas de testes apresentam taxas variadas de resultados inválidos. A rede se saiu muito bem na identificação de testes inválidos, alcançando alta precisão entre diferentes marcas.
Classificação dos Resultados
Depois que os resultados inválidos são filtrados, o sistema classifica os resultados restantes como positivos ou negativos. Pra melhorar a precisão, o sistema usa modelos previamente treinados que mostraram capacidade de reconhecer diferentes objetos em imagens. O processo de treinamento envolveu ajustes em dois modelos diferentes que mostraram potencial pra analisar resultados de testes. O método demonstrou bom desempenho para muitos dos cartões de teste.
Resultados do Estudo
Visão Geral do Conjunto de Dados
No total, o conjunto de dados incluiu mais de 51.000 imagens de testes coletadas de quase 7.000 participantes. Dessa coleção, uma pequena porcentagem foi encontrada como positiva pro vírus após revisão por clínicos especialistas. Apenas imagens contendo cartões de teste claros foram analisadas. Análises adicionais focaram em áreas válidas de cada imagem, o que ajudou a melhorar a precisão dos resultados.
Desempenho do Sistema
O sistema de interpretação de imagens proposto foi avaliado de forma abrangente. Foi encontrado que o sistema de IA poderia classificar os resultados dos testes com um alto nível de precisão. Por exemplo, ele superou as interpretações humanas em precisão, especialmente pra certas marcas. No entanto, houve variação em quão bem o sistema funcionou dependendo da marca do teste. Alguns testes eram mais difíceis de interpretar do que outros.
Importância de Dados do Mundo Real
Uma das principais vantagens deste estudo é que ele analisou imagens enviadas por participantes em situações do mundo real, e não sob condições controladas de laboratório. Isso torna os resultados mais aplicáveis ao uso cotidiano. Estudos anteriores costumavam focar em tipos únicos de teste ou condições ideais, enquanto esta pesquisa incluiu vários tipos de testes e cenários da vida real.
Desafios e Considerações
Problemas com Resultados Inválidos
Muitos estudos passados não se concentraram em reconhecer resultados inválidos, o que pode gerar confusão sobre se alguém está negativo pro vírus. Neste estudo, foi dada atenção especial à detecção de resultados inválidos, e o sistema mostrou que pode identificar esses casos com precisão. Esse é um passo importante pra garantir a confiabilidade dos testes.
Observações sobre Métodos de Detecção
Diferentes técnicas de correspondência de imagem foram avaliadas pela eficácia na identificação de áreas de interesse nos cartões de teste. Os resultados mostraram que, enquanto algumas técnicas se saíram bem, o sucesso do sistema poderia variar bastante dependendo de fatores como o design do teste e as condições em que as imagens foram capturadas.
Implicações para Sistemas Futuros
Pra qualquer sistema que visa interpretar testes rápidos de COVID-19 com precisão, é crucial garantir que ele possa lidar com designs diversos de testes. O desenvolvimento futuro deve considerar integrar marcadores visíveis pra melhorar as taxas de detecção e oferecer orientações aos usuários sobre como capturar imagens de forma eficaz.
Limitações do Estudo
Embora o sistema tenha alcançado resultados impressionantes, ele enfrentou limitações. Por exemplo, custos computacionais e a necessidade de imagens claras poderiam levar à rejeição de algumas imagens de teste, mesmo que contivessem resultados válidos. Além disso, a avaliação dos resultados dos testes dependia de interpretações humanas, que às vezes podem ser falhas.
Conclusão
Este estudo teve sucesso em desenvolver um sistema pra interpretar resultados de testes rápidos de COVID-19 usando IA e técnicas de correspondência de imagem. Os achados indicam que o sistema pode fornecer resultados confiáveis que podem superar aqueles obtidos através da interpretação humana. Apesar de alguns desafios, o método mostra potencial pra melhorar a precisão e a acessibilidade dos testes de COVID-19 em casa. No geral, esse sistema poderia servir como uma ferramenta significativa pra identificar casos positivos e fortalecer os esforços de saúde pública em meio aos desafios contínuos como a pandemia.
Título: Automated Classification of At-home SARS-CoV-2 Lateral Flow Assay Test Results using Image Matching and Transfer Learning: multiple-pipeline study
Resumo: IntroductionRapid antigen testing for SARS-CoV-2 is an important tool for the timely diagnosis of COVID-19, especially in at-home settings. However, the interpretation of test results can be subjective and prone to error. We describe an automated image analysis pipeline to accurately classify test types and results without human intervention using a dataset of 51,274 rapid antigen test images across three distinct test card brands. MethodsThe proposed method classifies participant-submitted images into four categories: positive for SARS-CoV-2, negative for SARS-CoV-2, invalid/uncertain, and unclassifiable. The model includes four stages: test card classification and region of interest detection using image-matching algorithms, elimination of invalid results using a developed Siamese neural network, and test result classification using transfer learning. ResultsThe model accuracy was very good for test-card classification (100%), region of interest detection (83.5%), and identification of invalid results ranging from 95.6% to 100% for different test types. Performance of the model for test result classification varied by tests; the models sensitivity, specificity, and precision for Abbott BinaxNOW was 0.761, 0.989, and 0.946, BD Veritor At-Home COVID-19 Test was 0.955, 0.993, and 0.877, and for QuickVue(R) At-Home OTC COVID-19 Test was 0.816, 0.988, and 0.930. ConclusionThe proposed method improved the interpretation of rapid antigen tests, particularly in invalid result detection compared to human-read, and offers a great opportunity for standardization of rapid antigen test interpretation and for providing feedback to participants with invalid tests.
Autores: Meysam Safarzadeh, C. Herbert, S. K. Wong, P. Stamegna, Y. Guilarte-Walker, C. Wright, T. Suvarna, C. Nowak, V. Kheterpal, S. Pandey, B. Wang, H. Lin, L. O'Connor, N. Hafer, K. Luzuriaga, Y. Manabe, J. Broach, A. H. Zai, D. D. McManus, X. Du, A. Soni
Última atualização: 2024-01-04 00:00:00
Idioma: English
Fonte URL: https://www.medrxiv.org/content/10.1101/2024.01.04.24300836
Fonte PDF: https://www.medrxiv.org/content/10.1101/2024.01.04.24300836.full.pdf
Licença: https://creativecommons.org/licenses/by-nc/4.0/
Alterações: Este resumo foi elaborado com a assistência da AI e pode conter imprecisões. Para obter informações exactas, consulte os documentos originais ligados aqui.
Obrigado ao medrxiv pela utilização da sua interoperabilidade de acesso aberto.