Fusión multimodal de datos de voz y gestos para el control de UAV
Autores: Xiang, Xiaojia; Tan, Qin; Zhou, Han; Tang, Dengqing; Lai, Jun
Idioma: Inglés
Editor: MDPI
Año: 2022
Acceso abierto
Artículo científico
2022
Fusión multimodal de datos de voz y gestos para el control de UAV
Categoría
Ingeniería y Tecnología
Subcategoría
Ingeniería Robótica
Palabras clave
Vehículo aéreo no tripulado
Modalidades de entrada
Voz
Datos de gestos
Rendimiento
Factor humano
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 1
Citaciones: Sin citaciones
Para permitir que los operadores de vehículos aéreos no tripulados (VANT) transmitan de manera eficiente e intuitiva sus comandos a un enjambre de VANT, proponemos el uso de modalidades de entrada naturales y centradas en el ser humano, como la voz y los gestos. Este documento aborda la fusión de modalidades de entrada, como los datos de voz y de gestos, que se capturan a través de un micrófono y un controlador Leap Motion, respectivamente, para controlar enjambres de VANT. Se presentan los resultados experimentales obtenidos y se analiza el rendimiento alcanzado (precisión). Finalmente, se combina una prueba de ergonomía de factores humanos con un cuestionario para verificar la validez del método.
Descripción
Para permitir que los operadores de vehículos aéreos no tripulados (VANT) transmitan de manera eficiente e intuitiva sus comandos a un enjambre de VANT, proponemos el uso de modalidades de entrada naturales y centradas en el ser humano, como la voz y los gestos. Este documento aborda la fusión de modalidades de entrada, como los datos de voz y de gestos, que se capturan a través de un micrófono y un controlador Leap Motion, respectivamente, para controlar enjambres de VANT. Se presentan los resultados experimentales obtenidos y se analiza el rendimiento alcanzado (precisión). Finalmente, se combina una prueba de ergonomía de factores humanos con un cuestionario para verificar la validez del método.