Avanços na Detecção de Pedestres em Baixa Luz
Um olhar sobre métodos para detectar pedestres em ambientes com pouca luz.
― 7 min ler
Índice
- A Importância da Detecção de Pedestres
- Desafios em Condições de Baixa Luminosidade
- Tecnologias Atuais em Detecção de Pedestres
- Abordagens para Detecção de Pedestres
- Métodos Baseados em Recursos
- Métodos de Aprendizado Profundo
- Métodos Híbridos
- Técnicas de Fusão de Imagens
- Métodos de Fusão Precoce
- Métodos de Fusão Intermediária
- Métodos de Fusão Tardia
- Conjuntos de Dados para Detecção de Pedestres em Baixa Luminosidade
- Conjunto de Dados KAIST
- Conjunto de Dados FLIR
- Outros Conjuntos de Dados Notáveis
- Medindo o Desempenho
- Tendências na Pesquisa
- Direções Atuais e Futuras
- Conclusão
- Fonte original
- Ligações de referência
Detectar pedestres é muito importante em áreas como visão computacional, vigilância e carros autônomos. Em particular, achar pessoas com pouca luz, como à noite, é crucial para carros autônomos evitarem acidentes e manterem as pessoas seguras. Este artigo explora diferentes maneiras de detectar pedestres em condições de pouca luz, incluindo vários métodos e desafios.
Detecção de Pedestres
A Importância daO reconhecimento automático e a localização de pedestres em imagens ou vídeos estão se tornando cada vez mais essenciais no mundo de hoje. Tem aplicações práticas em várias áreas, incluindo carros autônomos, sistemas de segurança e robótica. No entanto, essa tarefa nem sempre é fácil devido a diferentes fatores que podem afetar o desempenho dos sistemas de detecção.
Desafios em Condições de Baixa Luminosidade
Entre os desafios, a baixa luminosidade é frequentemente o maior problema. Isso pode acontecer devido a várias condições naturais, como a hora do dia ou o clima. Por exemplo, em alguns países do norte durante o inverno, pode haver poucas horas de luz do dia. Como resultado, os sistemas de detecção de pedestres precisam se adaptar a essas situações desafiadoras.
Tecnologias Atuais em Detecção de Pedestres
Algumas tecnologias, como o LiDAR, podem medir distâncias usando luz laser, mas não fornecem informações detalhadas sobre o ambiente. Este artigo revisa alguns métodos recentes voltados para a detecção de pedestres, cobrindo situações diversas e detalhando o desempenho em visibilidade baixa.
Abordagens para Detecção de Pedestres
Existem muitas abordagens diferentes para a detecção de pedestres, que podem ser amplamente categorizadas em três tipos principais:
- Métodos Baseados em Recursos: Esses métodos focam em selecionar manualmente características visuais específicas das imagens.
- Métodos de Aprendizado Profundo: Esses utilizam redes neurais para aprender e extrair características automaticamente de imagens brutas.
- Métodos Híbridos: Esses combinam os pontos fortes dos métodos baseados em recursos e de aprendizado profundo.
Métodos Baseados em Recursos
Métodos baseados em recursos dependem de características projetadas manualmente para identificar pedestres. Eles costumam ser mais simples e podem ser eficazes quando não há dados anotados disponíveis. No entanto, esses métodos podem ter dificuldades em cenários complexos e podem não se adaptar bem a novas situações.
Algumas tentativas iniciais nesse campo incluíram o uso de subtração de fundo para identificar pedestres em imagens térmicas. Embora tenham proporcionado algum nível de sucesso, geralmente apresentavam limitações, como detectar grupos de pessoas de forma imprecisa.
Métodos de Aprendizado Profundo
As abordagens de aprendizado profundo usam redes neurais para aprender automaticamente características das imagens. Elas mostraram muito melhor adaptabilidade e versatilidade em diversas situações, gerando resultados de alto desempenho. No entanto, esses métodos costumam exigir grandes quantidades de dados rotulados para treinamento e hardware potente.
Muitos estudos recentes têm se concentrado no uso de aprendizado profundo para deteção de pedestres em condições de baixa luminosidade. Esses métodos podem ser segmentados em diferentes estratégias, incluindo técnicas de fusão de imagens.
Métodos Híbridos
Métodos híbridos combinam tanto características feitas à mão quanto técnicas de aprendizado profundo, visando aproveitar os pontos fortes de cada um. Eles costumam exigir menos recursos computacionais do que métodos puramente de aprendizado profundo, mantendo-se eficazes na detecção de pedestres.
Técnicas de Fusão de Imagens
Fusão de imagens é o processo de combinar características significativas de imagens brutas capturadas por múltiplos sensores para criar uma única imagem com informações complementares. Este processo é essencial na detecção de pedestres em pouca luz, pois pode combinar os pontos fortes da imagem RGB (colorida) e da imagem térmica.
Métodos de Fusão Precoce
Na fusão precoce, as características visuais e térmicas são integradas logo após a primeira camada de um modelo de aprendizado profundo. Esse método permite que os pesquisadores combinem de forma eficaz as características de baixo nível da cor e os dados térmicos.
Métodos de Fusão Intermediária
A fusão intermediária ocorre nas etapas médias de uma rede. Aqui, diferentes mapas de características de entradas visuais e térmicas são combinados para criar uma representação mais completa dos pedestres.
Métodos de Fusão Tardia
A fusão tardia, também conhecida como fusão em nível de decisão, acontece depois que todas as camadas da rede processaram as entradas. Os resultados finais de detecção das duas modalidades são mesclados para classificar os pedestres de forma eficaz.
Conjuntos de Dados para Detecção de Pedestres em Baixa Luminosidade
Os dados são cruciais no desenvolvimento e avaliação de algoritmos de detecção de pedestres. O artigo destaca vários conjuntos de dados chave usados para detecção de pedestres em baixa luminosidade, que variam em suas características, como qualidade da imagem, número de amostras anotadas e diversidade de cenários.
Conjunto de Dados KAIST
Este conjunto de dados é um dos primeiros e amplamente utilizados conjuntos de dados de pedestres multiespectrais. Ele contém um número significativo de imagens anotadas e é fundamental para treinar e testar vários modelos de detecção de pedestres.
Conjunto de Dados FLIR
O conjunto de dados FLIR inclui pares de imagens visíveis e térmicas, tornando-o adequado para testar e avaliar algoritmos de detecção em condições de baixa luminosidade.
Outros Conjuntos de Dados Notáveis
Outros conjuntos de dados mencionados incluem o conjunto de dados OSU, LITIV, CVC-09 e NightOwls, que contêm várias sequências de vídeo e têm como objetivo aprimorar a pesquisa em reconhecimento de pedestres à noite.
Medindo o Desempenho
Avaliar o desempenho dos métodos de detecção de pedestres é essencial para entender sua eficácia. Diferentes métricas, como precisão média (mAP) e taxas de falsos positivos, são comumente usadas para avaliar quão bem um método pode detectar pedestres.
Tendências na Pesquisa
A análise da literatura existente revela várias tendências nas metodologias de detecção de pedestres. Há uma mudança acentuada em direção às técnicas de aprendizado profundo nos últimos anos, à medida que os pesquisadores se concentram em algoritmos que podem aprender características automaticamente e melhorar o desempenho da detecção.
Direções Atuais e Futuras
O artigo conclui discutindo as direções de pesquisa em andamento na detecção de pedestres em baixa luminosidade. Destaca a necessidade de algoritmos mais robustos que possam lidar com uma gama mais ampla de condições do mundo real. Também há uma chamada para mais atenção à IA explicável, que pode aumentar a confiança do público em sistemas autônomos.
Conclusão
A detecção de pedestres em condições de baixa luminosidade continua sendo um grande desafio. Este artigo explorou vários métodos e abordagens para melhorar o desempenho da detecção, indicando o futuro promissor das tecnologias de detecção de pedestres em melhorar a segurança de veículos autônomos e outras aplicações relacionadas à segurança de pedestres.
Título: Pedestrian Detection in Low-Light Conditions: A Comprehensive Survey
Resumo: Pedestrian detection remains a critical problem in various domains, such as computer vision, surveillance, and autonomous driving. In particular, accurate and instant detection of pedestrians in low-light conditions and reduced visibility is of utmost importance for autonomous vehicles to prevent accidents and save lives. This paper aims to comprehensively survey various pedestrian detection approaches, baselines, and datasets that specifically target low-light conditions. The survey discusses the challenges faced in detecting pedestrians at night and explores state-of-the-art methodologies proposed in recent years to address this issue. These methodologies encompass a diverse range, including deep learning-based, feature-based, and hybrid approaches, which have shown promising results in enhancing pedestrian detection performance under challenging lighting conditions. Furthermore, the paper highlights current research directions in the field and identifies potential solutions that merit further investigation by researchers. By thoroughly examining pedestrian detection techniques in low-light conditions, this survey seeks to contribute to the advancement of safer and more reliable autonomous driving systems and other applications related to pedestrian safety. Accordingly, most of the current approaches in the field use deep learning-based image fusion methodologies (i.e., early, halfway, and late fusion) for accurate and reliable pedestrian detection. Moreover, the majority of the works in the field (approximately 48%) have been evaluated on the KAIST dataset, while the real-world video feeds recorded by authors have been used in less than six percent of the works.
Autores: Bahareh Ghari, Ali Tourani, Asadollah Shahbahrami, Georgi Gaydadjiev
Última atualização: 2024-01-15 00:00:00
Idioma: English
Fonte URL: https://arxiv.org/abs/2401.07801
Fonte PDF: https://arxiv.org/pdf/2401.07801
Licença: https://creativecommons.org/licenses/by/4.0/
Alterações: Este resumo foi elaborado com a assistência da AI e pode conter imprecisões. Para obter informações exactas, consulte os documentos originais ligados aqui.
Obrigado ao arxiv pela utilização da sua interoperabilidade de acesso aberto.
Ligações de referência
- https://vcipl-okstate.org/pbvs/bench/Data/01/download.html
- https://www.polymtl.ca/litiv/en/codes-and-datasets
- https://adas.cvc.uab.es/elektra/enigma-portfolio/item-1/
- https://www.kaggle.com/datasets/muhammeddalkran/lsi-far-infrared-pedestrian-dataset/code
- https://csr.bu.edu/BU-TIV/
- https://github.com/SoonminHwang/rgbt-ped-detection
- https://adas.cvc.uab.es/elektra/enigma-portfolio/cvc-14-visible-fir-day-night-pedestrian-sequence-dataset/
- https://cvpr.kmu.ac.kr/KMU-SPC.html
- https://www.mi.t.u-tokyo.ac.jp/projects/mil_multispectral/
- https://camel.ece.gatech.edu/
- https://www.nightowls-dataset.org/
- https://github.com/SCUT-CV/SCUT_FIR_Pedestrian_Dataset
- https://www.flir.com/oem/adas/adas-dataset-form/
- https://ieee-dataport.org/open-access/zut-fir-adas
- https://github.com/bupt-ai-cz/LLVIP/
- https://ieee-dataport.org/documents/c3i-thermal-automotive-dataset/
- https://scholar.google.com/
- https://www.dblp.org/
- https://www.scopus.com