Ai ekphrasis: aprendizaje multimodal con modelos base para la recuperación de poesía detallada
Autores: Jabbar, Muhammad Shahid; Shin, Jitae; Cho, Jun-Dong
Idioma: Inglés
Editor: MDPI
Año: 2022
Acceso abierto
Artículo científico
2022
Ai ekphrasis: aprendizaje multimodal con modelos base para la recuperación de poesía detallada
Categoría
Ingeniería y Tecnología
Subcategoría
Ingeniería Eléctrica y Electrónica
Palabras clave
Inteligencia artificial
Procesamiento de lenguaje natural
Poesía
Razonamiento de imagen-poesía multimodal
Aprendizaje profundo
Modelo CLIP
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 34
Citaciones: Sin citaciones
La investigación en inteligencia artificial en el procesamiento del lenguaje natural en el contexto de la poesía lucha con el reconocimiento de contenido holístico como el simbolismo poético, la metáfora y otros atributos detallados. Dadas estas dificultades, el razonamiento y la recuperación de imágenes-poesía multi-modales siguen siendo en gran medida inexplorados. Nuestro reciente estudio de accesibilidad indica que la poesía es un medio efectivo para transmitir atributos de obras de arte visual para una mejor apreciación del arte por parte de personas con discapacidades visuales. Por lo tanto, presentamos un enfoque de aprendizaje profundo para la recuperación automática de poesía adecuada para las imágenes de entrada.
Descripción
La investigación en inteligencia artificial en el procesamiento del lenguaje natural en el contexto de la poesía lucha con el reconocimiento de contenido holístico como el simbolismo poético, la metáfora y otros atributos detallados. Dadas estas dificultades, el razonamiento y la recuperación de imágenes-poesía multi-modales siguen siendo en gran medida inexplorados. Nuestro reciente estudio de accesibilidad indica que la poesía es un medio efectivo para transmitir atributos de obras de arte visual para una mejor apreciación del arte por parte de personas con discapacidades visuales. Por lo tanto, presentamos un enfoque de aprendizaje profundo para la recuperación automática de poesía adecuada para las imágenes de entrada.