Reconocimiento de gestos con la punta de los dedos utilizando Leap Motion y cámara para interactuar con un entorno virtual
Autores: Rehman, Inam Ur; Ullah, Sehat; Khan, Dawar; Khalid, Shah; Alam, Aftab; Jabeen, Gul; Rabbi, Ihsan; Rahman, Haseeb Ur; Ali, Numan; Azher, Muhammad; Nabi, Syed; Khan, Sangeen
Idioma: Inglés
Editor: MDPI
Año: 2020
Acceso abierto
Artículo científico
2020
Reconocimiento de gestos con la punta de los dedos utilizando Leap Motion y cámara para interactuar con un entorno virtual
Categoría
Ingeniería y Tecnología
Subcategoría
Ingeniería Eléctrica y Electrónica
Palabras clave
Aparición
Computación
Tecnologías de hardware
Interacción natural
Gestos manuales
Entornos virtuales
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 60
Citaciones: Sin citaciones
La aparición en la informática y las últimas tecnologías de hardware han hecho posible el uso de interacciones naturales con las computadoras. La interacción basada en gestos es uno de los campos destacados de las interacciones naturales. La reconocimiento y aplicación de gestos manuales en entornos virtuales (VEs) requiere cálculos extensos debido a las complejidades involucradas, que afectan directamente el rendimiento y realismo de la interacción. En este documento, proponemos una nueva técnica de interacción que utiliza gestos basados en la punta de un solo dedo para interactuar con VEs. El objetivo del estudio es minimizar el costo computacional, aumentar el rendimiento y mejorar la usabilidad. La interacción implica navegación, selección, traducción y liberación de objetos. Con este fin, proponemos un sistema basado en cámara de bajo costo que utiliza la punta de un dedo de color para el reconocimiento más rápido y preciso de gestos. También implementamos la técnica de interacción propuesta utilizando el controlador Leap Motion. Presentamos un análisis comparativo del sistema propuesto con el controlador Leap Motion para el reconocimiento y operación de gestos. Se desarrolló un VE con fines experimentales. Además, realizamos un análisis exhaustivo de dos configuraciones de reconocimiento diferentes, incluida una cámara de video y el sensor Leap Motion. Los parámetros clave para el análisis fueron la precisión de la tarea, el volumen de interacción, la tasa de actualización y la distorsión espacial de la precisión. Utilizamos la Escala de Usabilidad Estándar (SUS) para el análisis de usabilidad del sistema. Los experimentos revelaron que la implementación de la cámara presentaba un buen rendimiento, menos distorsión espacial de precisión y un gran volumen de interacción en comparación con el sensor Leap Motion. También encontramos que la técnica de interacción propuesta es altamente utilizable en términos de satisfacción del usuario, facilidad de uso, aprendizaje y consistencia.
Descripción
La aparición en la informática y las últimas tecnologías de hardware han hecho posible el uso de interacciones naturales con las computadoras. La interacción basada en gestos es uno de los campos destacados de las interacciones naturales. La reconocimiento y aplicación de gestos manuales en entornos virtuales (VEs) requiere cálculos extensos debido a las complejidades involucradas, que afectan directamente el rendimiento y realismo de la interacción. En este documento, proponemos una nueva técnica de interacción que utiliza gestos basados en la punta de un solo dedo para interactuar con VEs. El objetivo del estudio es minimizar el costo computacional, aumentar el rendimiento y mejorar la usabilidad. La interacción implica navegación, selección, traducción y liberación de objetos. Con este fin, proponemos un sistema basado en cámara de bajo costo que utiliza la punta de un dedo de color para el reconocimiento más rápido y preciso de gestos. También implementamos la técnica de interacción propuesta utilizando el controlador Leap Motion. Presentamos un análisis comparativo del sistema propuesto con el controlador Leap Motion para el reconocimiento y operación de gestos. Se desarrolló un VE con fines experimentales. Además, realizamos un análisis exhaustivo de dos configuraciones de reconocimiento diferentes, incluida una cámara de video y el sensor Leap Motion. Los parámetros clave para el análisis fueron la precisión de la tarea, el volumen de interacción, la tasa de actualización y la distorsión espacial de la precisión. Utilizamos la Escala de Usabilidad Estándar (SUS) para el análisis de usabilidad del sistema. Los experimentos revelaron que la implementación de la cámara presentaba un buen rendimiento, menos distorsión espacial de precisión y un gran volumen de interacción en comparación con el sensor Leap Motion. También encontramos que la técnica de interacción propuesta es altamente utilizable en términos de satisfacción del usuario, facilidad de uso, aprendizaje y consistencia.