Un interfaz de usuario multimodal para un carrito de compras robótico asistencial
Autores: Ryumin, Dmitry; Kagirov, Ildar; Axyonov, Alexandr; Pavlyuk, Nikita; Saveliev, Anton; Kipyatkova, Irina; Zelezny, Milos; Mporas, Iosif; Karpov, Alexey
Idioma: Inglés
Editor: MDPI
Año: 2020
Acceso abierto
Artículo científico
2020
Un interfaz de usuario multimodal para un carrito de compras robótico asistencial
Categoría
Ingeniería y Tecnología
Subcategoría
Ingeniería Eléctrica y Electrónica
Palabras clave
Investigación
Desarrollo
Prototipo
Robot de información móvil asistencial
Interfaces basadas en voz y gestos
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 46
Citaciones: Sin citaciones
Este documento presenta la investigación y desarrollo del prototipo del robot de información móvil asistido (AMIR). Las principales características del prototipo presentado son interfaces basadas en voz y gestos con técnicas de reconocimiento y síntesis del habla y lenguaje de signos en ruso y un alto grado de autonomía del robot. El objetivo del prototipo de AMIR es ser utilizado como un carrito robótico para hacer compras en tiendas de comestibles y/o supermercados. Entre los principales temas cubiertos en este documento se encuentran la presentación de la interfaz (tres modalidades), el sistema de reconocimiento de gestos de una sola mano (basado en una base de datos recopilada de elementos del lenguaje de signos ruso), así como la descripción técnica de la plataforma robótica (arquitectura, algoritmo de navegación). El uso de interfaces multimodales, concretamente las modalidades de habla y gestos, hace que la interacción humano-robot sea natural e intuitiva, y el reconocimiento del lenguaje de signos permite a las personas con discapacidad auditiva utilizar este carrito robótico. El prototipo de AMIR tiene perspectivas prometedoras para un uso real en supermercados, tanto por sus capacidades de asistencia como por su interfaz de usuario multimodal.
Descripción
Este documento presenta la investigación y desarrollo del prototipo del robot de información móvil asistido (AMIR). Las principales características del prototipo presentado son interfaces basadas en voz y gestos con técnicas de reconocimiento y síntesis del habla y lenguaje de signos en ruso y un alto grado de autonomía del robot. El objetivo del prototipo de AMIR es ser utilizado como un carrito robótico para hacer compras en tiendas de comestibles y/o supermercados. Entre los principales temas cubiertos en este documento se encuentran la presentación de la interfaz (tres modalidades), el sistema de reconocimiento de gestos de una sola mano (basado en una base de datos recopilada de elementos del lenguaje de signos ruso), así como la descripción técnica de la plataforma robótica (arquitectura, algoritmo de navegación). El uso de interfaces multimodales, concretamente las modalidades de habla y gestos, hace que la interacción humano-robot sea natural e intuitiva, y el reconocimiento del lenguaje de signos permite a las personas con discapacidad auditiva utilizar este carrito robótico. El prototipo de AMIR tiene perspectivas prometedoras para un uso real en supermercados, tanto por sus capacidades de asistencia como por su interfaz de usuario multimodal.