TisLLM: Mejora del Ajuste Fino de Modelos de Lenguaje Grande mediante Integración Temporal para Recomendación Secuencial
Autores: Zhu, Xiaosong; Li, Wenzheng; Zhang, Bingqiang; Geng, Liqing
Idioma: Inglés
Editor: MDPI
Año: 2025
Acceso abierto
Artículo científico
2025
TisLLM: Mejora del Ajuste Fino de Modelos de Lenguaje Grande mediante Integración Temporal para Recomendación Secuencial
Categoría
Gestión y administración
Subcategoría
Gestión de la tecnología y la inovación
Palabras clave
Modelos de lenguaje
Sistemas de recomendación
Patrones secuenciales
Dinámicas temporales
Ajuste fino
TisLLM
Licencia
CC BY-SA – Atribución – Compartir Igual
Consultas: 1
Citaciones: Sin citaciones
En los últimos años, la notable versatilidad de los grandes modelos de lenguaje (LLMs) ha suscitado un considerable interés en aprovechar sus capacidades para sistemas de recomendación. Críticamente, argumentamos que la aptitud intrínseca de los LLMs para modelar patrones secuenciales y dinámicas temporales los hace especialmente adecuados para tareas de recomendación secuencial, una premisa fundamental que se explora en profundidad más adelante en este trabajo. Sin embargo, este potencial se ve atenuado por obstáculos significativos: existe una brecha discernible entre las competencias generales de los LLMs convencionales y las necesidades especializadas de las tareas de recomendación, y su capacidad para descubrir interrelaciones complejas y latentes en los datos a menudo resulta inadecuada, lo que puede socavar la eficacia de las recomendaciones. Para cerrar esta brecha, nuestro enfoque se centra en adaptar los LLMs mediante un ajuste fino en conjuntos de datos de recomendación dedicados, mejorando la alineación específica de la tarea. Además, presentamos el marco de Ajuste Fino Mejorado por Integración Temporal de Grandes Modelos de Lenguaje para Recomendación Secuencial (TisLLM). TisLLM se dirige específicamente a la excavación más profunda de asociaciones implícitas dentro de los flujos de datos de recomendación. Su mecanismo central implica la partición de datos de interacción secuencial del usuario utilizando ventanas deslizantes definidas temporalmente. Estas porciones segmentadas cronológicamente se agregan para formar representaciones contextuales enriquecidas, que posteriormente impulsan el proceso de ajuste fino del LLM. Esta metodología refuerza explícitamente la compatibilidad del modelo con la naturaleza inherentemente secuencial de los escenarios de recomendación. Una evaluación rigurosa en conjuntos de datos de referencia proporciona una validación empírica robusta, confirmando la efectividad del marco TisLLM.
Descripción
En los últimos años, la notable versatilidad de los grandes modelos de lenguaje (LLMs) ha suscitado un considerable interés en aprovechar sus capacidades para sistemas de recomendación. Críticamente, argumentamos que la aptitud intrínseca de los LLMs para modelar patrones secuenciales y dinámicas temporales los hace especialmente adecuados para tareas de recomendación secuencial, una premisa fundamental que se explora en profundidad más adelante en este trabajo. Sin embargo, este potencial se ve atenuado por obstáculos significativos: existe una brecha discernible entre las competencias generales de los LLMs convencionales y las necesidades especializadas de las tareas de recomendación, y su capacidad para descubrir interrelaciones complejas y latentes en los datos a menudo resulta inadecuada, lo que puede socavar la eficacia de las recomendaciones. Para cerrar esta brecha, nuestro enfoque se centra en adaptar los LLMs mediante un ajuste fino en conjuntos de datos de recomendación dedicados, mejorando la alineación específica de la tarea. Además, presentamos el marco de Ajuste Fino Mejorado por Integración Temporal de Grandes Modelos de Lenguaje para Recomendación Secuencial (TisLLM). TisLLM se dirige específicamente a la excavación más profunda de asociaciones implícitas dentro de los flujos de datos de recomendación. Su mecanismo central implica la partición de datos de interacción secuencial del usuario utilizando ventanas deslizantes definidas temporalmente. Estas porciones segmentadas cronológicamente se agregan para formar representaciones contextuales enriquecidas, que posteriormente impulsan el proceso de ajuste fino del LLM. Esta metodología refuerza explícitamente la compatibilidad del modelo con la naturaleza inherentemente secuencial de los escenarios de recomendación. Una evaluación rigurosa en conjuntos de datos de referencia proporciona una validación empírica robusta, confirmando la efectividad del marco TisLLM.