Auto-HCL: Aprendizaje multitarea auto-supervisado con estrategia de aprendizaje contrastivo híbrido para análisis de sentimientos multimodal
Autores: Fu, Youjia; Fu, Junsong; Xue, Huixia; Xu, Zihao
Idioma: Inglés
Editor: MDPI
Año: 2024
Acceso abierto
Artículo científico
2024
Auto-HCL: Aprendizaje multitarea auto-supervisado con estrategia de aprendizaje contrastivo híbrido para análisis de sentimientos multimodal
Categoría
Ingeniería y Tecnología
Subcategoría
Ingeniería Eléctrica y Electrónica
Palabras clave
Análisis de sentimientos multimodal
Anotaciones unimodales
Auto-HCL
Módulo de mejora de características unimodales
Aprendizaje contrastivo híbrido
Módulo de generación de etiquetas unimodales
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 34
Citaciones: Sin citaciones
El Análisis de Sentimientos Multimodal (MSA) juega un papel crítico en muchas aplicaciones, incluyendo el servicio al cliente, asistentes personales y comprensión de videos. Actualmente, la mayoría de la investigación sobre MSA se centra en el desarrollo de representaciones multimodales, en gran parte debido a la escasez de anotaciones unimodales en los conjuntos de datos de referencia de MSA. Sin embargo, la dependencia exclusiva en representaciones multimodales para entrenar modelos resulta en un rendimiento subóptimo debido al aprendizaje insuficiente de cada representación unimodal.
Descripción
El Análisis de Sentimientos Multimodal (MSA) juega un papel crítico en muchas aplicaciones, incluyendo el servicio al cliente, asistentes personales y comprensión de videos. Actualmente, la mayoría de la investigación sobre MSA se centra en el desarrollo de representaciones multimodales, en gran parte debido a la escasez de anotaciones unimodales en los conjuntos de datos de referencia de MSA. Sin embargo, la dependencia exclusiva en representaciones multimodales para entrenar modelos resulta en un rendimiento subóptimo debido al aprendizaje insuficiente de cada representación unimodal.