Interpretación de dibujos utilizando redes neuronales e implementación de accesibilidad en aplicación móvil
Autores: Popescu, Aura-Loredana; Popescu, Nirvana
Idioma: Inglés
Editor: MDPI
Año: 2022
Acceso abierto
Artículo científico
2022
Interpretación de dibujos utilizando redes neuronales e implementación de accesibilidad en aplicación móvil
Categoría
Ingeniería y Tecnología
Subcategoría
Ingeniería de Sistemas
Palabras clave
Investigación
Aplicación móvil PandaSays
Estado afectivo
Niño
Red neuronal MobileNet
Trastorno del espectro autista
Lenguaje de programación Python
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 20
Citaciones: Sin citaciones
Este documento continúa la investigación del trabajo anterior, en relación con la aplicación móvil PandaSays, teniendo como objetivo principal detectar el estado afectivo del niño a partir de sus dibujos, utilizando la red neuronal MobileNet. Los niños diagnosticados con trastorno del espectro autista tienen dificultades para expresar sus sentimientos y comunicarse con los demás. El propósito de la aplicación móvil PandaSays es ayudar a los padres y tutores que tienen niños diagnosticados con autismo a comunicarse mejor con ellos y comprender sus sentimientos. El objetivo principal era mejorar la precisión del modelo, entrenado con la red neuronal MobileNet, que alcanzó el valor del 84.583%. Para entrenar el modelo, se utilizó el lenguaje de programación Python. El estudio se centra además en la accesibilidad y su importancia para los niños diagnosticados con autismo. Se presentan capturas de pantalla relevantes de la aplicación móvil, con el fin de indicar que la aplicación sigue las pautas y reglas de accesibilidad. Por último, se presenta la interacción con el robot Marty y la eficacia de la predicción de dibujos de la aplicación móvil.
Descripción
Este documento continúa la investigación del trabajo anterior, en relación con la aplicación móvil PandaSays, teniendo como objetivo principal detectar el estado afectivo del niño a partir de sus dibujos, utilizando la red neuronal MobileNet. Los niños diagnosticados con trastorno del espectro autista tienen dificultades para expresar sus sentimientos y comunicarse con los demás. El propósito de la aplicación móvil PandaSays es ayudar a los padres y tutores que tienen niños diagnosticados con autismo a comunicarse mejor con ellos y comprender sus sentimientos. El objetivo principal era mejorar la precisión del modelo, entrenado con la red neuronal MobileNet, que alcanzó el valor del 84.583%. Para entrenar el modelo, se utilizó el lenguaje de programación Python. El estudio se centra además en la accesibilidad y su importancia para los niños diagnosticados con autismo. Se presentan capturas de pantalla relevantes de la aplicación móvil, con el fin de indicar que la aplicación sigue las pautas y reglas de accesibilidad. Por último, se presenta la interacción con el robot Marty y la eficacia de la predicción de dibujos de la aplicación móvil.