Video super-resolución utilizando fusión de características multi-escala y no locales
Autores: Li, Yanghui; Zhu, Hong; Hou, Qian; Wang, Jing; Wu, Wenhuan
Idioma: Inglés
Editor: MDPI
Año: 2022
Acceso abierto
Artículo científico
2022
Video super-resolución utilizando fusión de características multi-escala y no locales
Categoría
Ingeniería y Tecnología
Subcategoría
Ingeniería Eléctrica y Electrónica
Palabras clave
Video de super resolución
Cuadros de video de alta resolución
Cuadros de video de baja resolución
Características no locales
Características a múltiples escalas
Información efectiva
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 28
Citaciones: Sin citaciones
La super resolución de video puede generar correspondientes a cuadros de video de alta resolución a partir de una pluralidad de cuadros de video de baja resolución que tienen detalles ricos y consistencia temporal. La mayoría de los métodos actuales utilizan una estructura de dos niveles para reconstruir cuadros de video combinando una red de flujo óptico y una red de super resolución, pero este proceso no explora en profundidad la información efectiva contenida en los cuadros de video. Por lo tanto, proponemos un método de super resolución de video que combina características no locales y características multi-escala para extraer información efectiva más profunda contenida en los cuadros de video. Nuestro método obtiene información efectiva a larga distancia al calcular la similitud entre cualquier par de píxeles en el cuadro de video a través del módulo no local, extrae la información local cubierta por diferentes núcleos de convolución de escala a través del módulo de fusión de características multi-escala, y fusiona completamente la información de características utilizando diferentes modos de conexión de núcleos de convolución. Los experimentos en diferentes conjuntos de datos muestran que el método propuesto es superior a los métodos existentes en calidad y cantidad.
Descripción
La super resolución de video puede generar correspondientes a cuadros de video de alta resolución a partir de una pluralidad de cuadros de video de baja resolución que tienen detalles ricos y consistencia temporal. La mayoría de los métodos actuales utilizan una estructura de dos niveles para reconstruir cuadros de video combinando una red de flujo óptico y una red de super resolución, pero este proceso no explora en profundidad la información efectiva contenida en los cuadros de video. Por lo tanto, proponemos un método de super resolución de video que combina características no locales y características multi-escala para extraer información efectiva más profunda contenida en los cuadros de video. Nuestro método obtiene información efectiva a larga distancia al calcular la similitud entre cualquier par de píxeles en el cuadro de video a través del módulo no local, extrae la información local cubierta por diferentes núcleos de convolución de escala a través del módulo de fusión de características multi-escala, y fusiona completamente la información de características utilizando diferentes modos de conexión de núcleos de convolución. Los experimentos en diferentes conjuntos de datos muestran que el método propuesto es superior a los métodos existentes en calidad y cantidad.