Red de híbrida basada en diferenciación dinámica para una mejor predicción de movimiento basada en esqueletos 3D
Autores: Ji, Ruiya; Lu, Chengjie; Zhong, Jianqi
Idioma: Inglés
Editor: MDPI
Año: 2024
Acceso abierto
Artículo científico
2024
Red de híbrida basada en diferenciación dinámica para una mejor predicción de movimiento basada en esqueletos 3D
Categoría
Ingeniería y Tecnología
Subcategoría
Inteligencia Artificial
Palabras clave
Esqueleto
Predicción del movimiento humano
Características dinámicas
Correlaciones espacio-temporales
Red
Experimentos
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 24
Citaciones: Sin citaciones
La predicción de movimiento humano basada en esqueletos tridimensionales es una tarea esencial y desafiante para las interacciones humano-máquina, con el objetivo de predecir poses futuras dadas un historial de movimientos previos. Sin embargo, los métodos existentes a menudo no logran modelar de manera efectiva los cambios dinámicos y optimizar las características espacio-temporales. En este documento, presentamos las Redes Híbridas basadas en Diferenciación Dinámica (2DHnet), que aborda estos problemas con dos innovaciones: el Extractor de Dependencias Diferenciales Dinámicas (2D-DE) para capturar características dinámicas como la velocidad y la aceleración, y el Extractor de Dependencias Espacio-Temporales basado en Atención (AST-DE) para mejorar las correlaciones espacio-temporales. El 2DHnet combina estos en una red de doble rama, ofreciendo una representación de movimiento integral. Los experimentos en los conjuntos de datos Human3.6M y 3DPW muestran que 2DHnet supera significativamente a los métodos existentes, con mejoras promedio del 4.7% y 26.6% en MPJPE, respectivamente.
Descripción
La predicción de movimiento humano basada en esqueletos tridimensionales es una tarea esencial y desafiante para las interacciones humano-máquina, con el objetivo de predecir poses futuras dadas un historial de movimientos previos. Sin embargo, los métodos existentes a menudo no logran modelar de manera efectiva los cambios dinámicos y optimizar las características espacio-temporales. En este documento, presentamos las Redes Híbridas basadas en Diferenciación Dinámica (2DHnet), que aborda estos problemas con dos innovaciones: el Extractor de Dependencias Diferenciales Dinámicas (2D-DE) para capturar características dinámicas como la velocidad y la aceleración, y el Extractor de Dependencias Espacio-Temporales basado en Atención (AST-DE) para mejorar las correlaciones espacio-temporales. El 2DHnet combina estos en una red de doble rama, ofreciendo una representación de movimiento integral. Los experimentos en los conjuntos de datos Human3.6M y 3DPW muestran que 2DHnet supera significativamente a los métodos existentes, con mejoras promedio del 4.7% y 26.6% en MPJPE, respectivamente.