Shiyf: un marco de YARN seguro y de alta integridad
Autores: Deng, Junyi; Liu, Yanheng; Wang, Jian; Li, Shujing
Idioma: Inglés
Editor: MDPI
Año: 2019
Acceso abierto
Artículo científico
2019
Shiyf: un marco de YARN seguro y de alta integridad
Categoría
Ingeniería y Tecnología
Subcategoría
Ingeniería Eléctrica y Electrónica
Palabras clave
Computación en la nube
Procesamiento de datos
Marco de trabajo YARN
Seguridad
Proceso MapReduce
Nodos maliciosos
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 29
Citaciones: Sin citaciones
La computación en la nube se está convirtiendo en un método poderoso de procesamiento de datos en paralelo, y puede ser adoptada por muchos proveedores de servicios de red para construir un marco de servicio. Aunque la computación en la nube es capaz de procesar eficientemente una gran cantidad de datos, puede ser atacada fácilmente debido a sus nodos de clúster masivamente distribuidos. En este documento, proponemos un marco YARN seguro y de alta integridad (SHIYF), que establece una estrecha relación entre la ejecución especulativa y la seguridad de Yet Another Resource Negotiator (YARN, MapReduce 2.0). SHIYF calcula y compara los hashes MD5 de los resultados intermedios y finales en el proceso de MapReduce lanzando las ejecuciones especulativas en una cierta proporción, lo que permite encontrar nodos maliciosos reales y potenciales en el clúster de Hadoop. El prototipo de SHIYF se implementa basado en Hadoop 2.8.0. En este documento, las derivaciones teóricas y los experimentos muestran que SHIYF no solo garantiza la seguridad y alta integridad del proceso de MapReduce, sino que también localiza con éxito los nodos maliciosos y los potencialmente maliciosos en Hadoop, aumentando ligeramente los costos operativos. Además, la proporción de detección de nodos maliciosos es superior al 87%.
Descripción
La computación en la nube se está convirtiendo en un método poderoso de procesamiento de datos en paralelo, y puede ser adoptada por muchos proveedores de servicios de red para construir un marco de servicio. Aunque la computación en la nube es capaz de procesar eficientemente una gran cantidad de datos, puede ser atacada fácilmente debido a sus nodos de clúster masivamente distribuidos. En este documento, proponemos un marco YARN seguro y de alta integridad (SHIYF), que establece una estrecha relación entre la ejecución especulativa y la seguridad de Yet Another Resource Negotiator (YARN, MapReduce 2.0). SHIYF calcula y compara los hashes MD5 de los resultados intermedios y finales en el proceso de MapReduce lanzando las ejecuciones especulativas en una cierta proporción, lo que permite encontrar nodos maliciosos reales y potenciales en el clúster de Hadoop. El prototipo de SHIYF se implementa basado en Hadoop 2.8.0. En este documento, las derivaciones teóricas y los experimentos muestran que SHIYF no solo garantiza la seguridad y alta integridad del proceso de MapReduce, sino que también localiza con éxito los nodos maliciosos y los potencialmente maliciosos en Hadoop, aumentando ligeramente los costos operativos. Además, la proporción de detección de nodos maliciosos es superior al 87%.