Dissertação

Multispectral and Multiscale Feature-Level Fusion for Pedestrian Detection in Road Environments EVALUATED

Os veículos autónomos em ambientes rodoviários enfrentam o problema de operar em diferentes condições meteorológicas e diferentes condições de iluminação. Isto dificulta a capacidade de um único sensor obter todas as informações necessárias acerca do ambiente em que se encontra para detectar e identificar objetos. Por esta razão, é estudada uma solução multiespectral para a detecção de peões, que usa imagens obtidas por uma câmera RGB e uma câmera térmica. Abordamos este problema através da fusão de features obtidas por ambas as modalidades de sensores através de Redes Neuronais Convolucionais (CNNs), com diferentes dimensões, e com a ajuda de Feature Pyramid Networks (FPNs). Os resultados obtidos corroboram que a combinação de imagens RGB com imagens térmicas melhora os resultados da tarefa de detecção de peões em ambientes rodoviários.
Deteção de Objetos, Fusão de Sensores, Fusão ao Nível de Features, Imagens Multiespectrais, Deteção de Peões

junho 28, 2023, 11:0

Publicação

Obra sujeita a Direitos de Autor

Orientação

ORIENTADOR

Diogo Arreda

Engenheiro

ORIENTADOR

Alexandre José Malheiro Bernardino

Departamento de Engenharia Electrotécnica e de Computadores (DEEC)

Professor Associado