PROMOTUR

Desarrollo de un sistema IA audiovisual y multilingüe para la PROMOción TURística

Ref. no. PID2024-160929OB-I00
2025-2029


El proyecto de investigación que solicitamos se enmarca dentro del ámbito de las tecnologías lingüísticas multilingües. Se trata de una investigación interdisciplinar, con una fuerte base en las tendencias recientes de PLN, cuyo objetivo principal es el desarrollo de un sistema de generación semi-automática de contenido audiovisual multilingüe destinada a empresas, instituciones y servicios del sector turístico que buscan mejorar su presencia y comunicación en plataformas digitales.

A pesar de que las tecnologías de PLN, tales como ChatGPT, Gemini o Copilot, han irrumpido en los últimos años, lo cierto es que su utilidad es limitada en dominios específicos como la generación de contenido para redes sociales en el ámbito turístico, además de no estar exentos de problemas. Para solucionar estos problemas, el sistema GAMATUR incluirá tres componentes basados en modelos adaptados de IA generativa, que estarán optimizados para la creación de contenido audiovisual y textual. El primero de estos componentes es un generador de subtítulos automáticos a partir de la transcripción de audio de los vídeos. También ofrecerá la posibilidad de generar estos subtítulos en varios idiomas para facilitar la difusión y alcance global, además de mejorar la accesibilidad. El segundo componente integrará LLMs que ofrecerán al usuario obtener descripciones generadas automáticamente tanto del vídeo como de fotogramas concretos. Estas descripciones podrán ser traducidas a cualquiera de los idiomas del sistema, y se podrá generar voz artificial a partir de las descripciones en texto. Como parte de este componente, se dará la opción de hacer consultas a los LLMs mediante un chatbot, con el que se podrá interactuar por escrito o por voz. Por último, el sistema permitirá realizar ciertas ediciones automáticas de mejoras de calidad de audio y vídeo mediante modelos generativos, además de otras ediciones como cortes automáticos, entre otras.

El diseño e implementación de estas funcionalidades estará marcado por las últimas tendencias en PLN e IA. Los recientes avances dejan clara la efectividad de los LLMs y las redes neuronales basadas en Transformer, los cuales aportan lo necesario para el desarrollo de este sistema. Para conseguir un adecuado rendimiento de dichos modelos y algoritmos integrados, estos serán ajustados y optimizados combinándolos con corpus comparables y corpus multimodales del ámbito turístico, así como recursos terminológicos que se compilarán durante el desarrollo del proyecto.

El sistema GAMATUR será una herramienta integral y avanzada que no solo mejorará la eficiencia y efectividad de la creación de contenido, sino que también aporta un valor significativo a la promoción y desarrollo del turismo, especialmente en áreas rurales y sectores especializados como el turismo enológico. También facilita la aplicación y la transferencia tecnológica y favorece el desarrollo económico, mejorando la competitividad empresarial y el sector turístico tanto de Andalucía como de España en relación con países europeos y del resto del mundo en un contexto cada vez más globalizado.