Una selección dinámica de un conjunto de detectores de deepfakes especializados en partes individuales del rostro
Autores: Kawabe, Akihisa; Haga, Ryuto; Tomioka, Yoichi; Shin, Jungpil; Okuyama, Yuichi
Idioma: Inglés
Editor: MDPI
Año: 2023
Acceso abierto
Artículo científico
2023
Una selección dinámica de un conjunto de detectores de deepfakes especializados en partes individuales del rostro
Categoría
Ingeniería y Tecnología
Subcategoría
Ingeniería Eléctrica y Electrónica
Palabras clave
Desarrollo de tecnología deepfake
Aprendizaje profundo
Imágenes
Métodos de detección
Redes neuronales convolucionales
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 37
Citaciones: Sin citaciones
El desarrollo de la tecnología deepfake, basada en el aprendizaje profundo, ha facilitado la creación de imágenes de rostros humanos falsos que son indistinguibles de la realidad. Muchos métodos y programas deepfake están públicamente disponibles y pueden ser utilizados maliciosamente, por ejemplo, creando cuentas falsas en redes sociales con imágenes de rostros humanos inexistentes. Para prevenir el uso indebido de estas imágenes falsas, se han propuesto varios métodos de detección de deepfakes como medida de contramedida y han demostrado ser capaces de detectar deepfakes con alta precisión cuando se ha identificado el modelo de deepfake objetivo. Sin embargo, los enfoques existentes no son robustos a la edición parcial y/o la ocultación causada por máscaras, gafas o edición manual, lo que puede provocar una caída inaceptable en la precisión. En este documento, proponemos un enfoque de detección de deepfake novedoso basado en una configuración dinámica de un modelo de conjunto que consta de detectores de deepfake. Estos detectores de deepfake se basan en redes neuronales convolucionales (CNN) y están especializados en detectar deepfakes centrándose en partes individuales del rostro. Demostramos que una selección dinámica de partes del rostro y un conjunto de modelos CNN seleccionados es efectivo para lograr una detección de deepfake altamente precisa incluso en imágenes editadas parcialmente y ocultas.
Descripción
El desarrollo de la tecnología deepfake, basada en el aprendizaje profundo, ha facilitado la creación de imágenes de rostros humanos falsos que son indistinguibles de la realidad. Muchos métodos y programas deepfake están públicamente disponibles y pueden ser utilizados maliciosamente, por ejemplo, creando cuentas falsas en redes sociales con imágenes de rostros humanos inexistentes. Para prevenir el uso indebido de estas imágenes falsas, se han propuesto varios métodos de detección de deepfakes como medida de contramedida y han demostrado ser capaces de detectar deepfakes con alta precisión cuando se ha identificado el modelo de deepfake objetivo. Sin embargo, los enfoques existentes no son robustos a la edición parcial y/o la ocultación causada por máscaras, gafas o edición manual, lo que puede provocar una caída inaceptable en la precisión. En este documento, proponemos un enfoque de detección de deepfake novedoso basado en una configuración dinámica de un modelo de conjunto que consta de detectores de deepfake. Estos detectores de deepfake se basan en redes neuronales convolucionales (CNN) y están especializados en detectar deepfakes centrándose en partes individuales del rostro. Demostramos que una selección dinámica de partes del rostro y un conjunto de modelos CNN seleccionados es efectivo para lograr una detección de deepfake altamente precisa incluso en imágenes editadas parcialmente y ocultas.