Monocular depth estimation from a single infrared image
Autores: Han, Daechan; Choi, Yukyung
Idioma: Inglés
Editor: MDPI
Año: 2022
Acceso abierto
Artículo científico
2022
Monocular depth estimation from a single infrared image
Categoría
Ingeniería y Tecnología
Subcategoría
Ingeniería Eléctrica y Electrónica
Palabras clave
Imagen térmica infrarroja
Estimación de profundidad monocular auto-supervisada
Imágenes RGB
Marco Autoguiado
Pérdida Patch-NetVLAD
Pérdida de coincidencia de imágenes
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 35
Citaciones: Sin citaciones
La termografía infrarroja está atrayendo mucha atención debido a su resistencia a la variación de la iluminación. Sin embargo, debido a la diferencia espectral entre las imágenes infrarrojas térmicas y las imágenes RGB, la investigación existente sobre la estimación de profundidad monocular auto-supervisada tiene limitaciones de rendimiento. Por lo tanto, en este estudio, proponemos un nuevo Marco Autoguiado utilizando una Pseudomarca predicha a partir de imágenes RGB. Nuestro marco propuesto, que resuelve el problema de pérdida de coincidencia de apariencia en el marco existente, transfiere la alta precisión de la Pseudomarca a la red de estimación de profundidad térmica mediante la comparación de píxeles de bajo y alto nivel. Además, proponemos la Pérdida Patch-NetVLAD, que fortalece la información de detalle local y contexto global en el mapa de profundidad de la termografía infrarroja mediante la comparación de descriptores a nivel de parche localmente global. Finalmente, introducimos una Pérdida de Coincidencia de Imagen para estimar un mapa de profundidad más preciso en una red de profundidad térmica al mejorar el rendimiento de la Pseudomarca. Demostramos que el marco propuesto muestra una mejora significativa en el rendimiento incluso cuando se aplica a varias redes de profundidad en el Conjunto de Datos Multiespectral de KAIST.
Descripción
La termografía infrarroja está atrayendo mucha atención debido a su resistencia a la variación de la iluminación. Sin embargo, debido a la diferencia espectral entre las imágenes infrarrojas térmicas y las imágenes RGB, la investigación existente sobre la estimación de profundidad monocular auto-supervisada tiene limitaciones de rendimiento. Por lo tanto, en este estudio, proponemos un nuevo Marco Autoguiado utilizando una Pseudomarca predicha a partir de imágenes RGB. Nuestro marco propuesto, que resuelve el problema de pérdida de coincidencia de apariencia en el marco existente, transfiere la alta precisión de la Pseudomarca a la red de estimación de profundidad térmica mediante la comparación de píxeles de bajo y alto nivel. Además, proponemos la Pérdida Patch-NetVLAD, que fortalece la información de detalle local y contexto global en el mapa de profundidad de la termografía infrarroja mediante la comparación de descriptores a nivel de parche localmente global. Finalmente, introducimos una Pérdida de Coincidencia de Imagen para estimar un mapa de profundidad más preciso en una red de profundidad térmica al mejorar el rendimiento de la Pseudomarca. Demostramos que el marco propuesto muestra una mejora significativa en el rendimiento incluso cuando se aplica a varias redes de profundidad en el Conjunto de Datos Multiespectral de KAIST.