Maestría en Ciencias de los Datos y Analítica · 2025
Inteligencia del mercado laboral colombiano : detección automatizada de habilidades mediante modelos grandes de lenguaje (LLM) y recuperación aumentada (RAG)
The demand for skills in the labor market has evolved significantly in recent decades, driven by changes in the economic environment and constant technological advances. In this context, the detailed description of each job offer, available on employment web portals, provides accurate information on the specific skills required by the market in real time. Labor Market Intelligence (LMI) research uses this data along with machine learning algorithms to anticipate trends and understand the evolution of talent demand. Despite advances in artificial intelligence and the availability of large data volumes, there remains a gap in adapting these technologies to local contexts. Regional markets, such as Colombia, require customized approaches to ensure that technological solutions respond to the specific needs of the labor market, effectively aligning talent supply and demand. This study analyzes data from the Talent.com employment platform for Colombia using a state-of-the-art approach based on Large Language Models (LLM) combined with Retrieval Augmented Generation (RAG) to identify emerging, traditional, technical, and soft skills. In the first stage, a multilingual LLM extracts skill mentions from job descriptions. In the second stage, a semantic retrieval module queries the European Commission’s open ESCO skills taxonomy to propose standardized candidate labels, the LLM then selects the most appropriate label and delivers validated, structured JSON outputs. Preliminary results show improvements in precision, coverage, and auditability compared to purely supervised approaches, reducing hallucinations through candidate-constrained selection and standardizing categories using ESCO skill classification. This framework provides valuable insights that, in future work, may support universities in designing academic programs aligned with labor market needs, thus facilitating strategic decision-making for employers, policymakers, and educators, and contributing to talent development and the reduction of unemployment in Colombia.
Texto completo 71 páginas con texto
Leer la tesis completa Ficha en el repositorio
Contenido
- INTRODUCCIÓNp. 8
- PLANTEAMIENTO DEL PROBLEMAp. 10
- JUSTIFICACIÓNp. 12
- OBJETIVOSp. 14
- GENERALp. 14
- ESPECÍFICOSp. 14
- MARCO CONCEPTUALp. 15
- DISEÑO METODOLÓGICOp. 24
- RESULTADOSp. 35
- CONCLUSIONESp. 66
- REFERENCIASp. 67
- ANEXOSp. 71
- Figura 1. Top 15 ofertas laborales por Departamentop. 36
- Figura 2. Top 15 ofertas laborales por Ciudadp. 36
- Figura 3. Estructura del sistema de Clasificación Ocupacional Estándar (SOC)p. 38
- Figura 4. Top 15 ofertas laborales por grupo mayor SOCp. 38
- Figura 5. Top 15 ofertas laborales por grupo menor SOCp. 39
- Figura 6. Top 15 ofertas laborales por ocupación amplia SOCp. 40
- Figura 7. Top 15 ofertas laborales por ocupación detallada SOCp. 40
- Figura 8. Top 15 títulos de ofertas laborales en todo el paísp. 41
- Figura 9. Top 5 ofertas laborales en ciudades principales (Bogotá, Medellín, Cali)p. 42
- Figura 10. Especificaciones técnicas GPU Nvidia H100p. 43
- Figura 11. Prompt del extractor de habilidadesp. 44
- Figura 12.Función extract_skills_gemmap. 45
- Figura 13. Función extract_with_cachep. 46
- Figura 14. Estadísticas descriptivas de habilidades extraídasp. 47
- Figura 15. Distribución del número de habilidades (excluyendo listas vacías)p. 48
- Figura 16. Función de embeddingp. 49
- Figura 17. Preparación de tabla de alias de ESCOp. 50
- Figura 18. Función retrieve_esco_candidatesp. 51
- Figura 19. Función normalize_one_skill_robustp. 52
- Figura 20. Formato de salida de la función de normalización con RAGp. 52
- Figura 21. Proporción de habilidades normalizadas por métodop. 53
- Figura 22. Top 15 habilidades ESCO en la muestrap. 54
- Figura 23. Métricas de evaluación a nivel globalp. 55
- Figura 24. Métricas de evaluación según grupo mayor SOCp. 57
- Figura 25. Prompt del clasificador de habilidadesp. 58
- Figura 26. Ofertas por tipo de habilidad (técnica / blanda)p. 59
- Figura 27. Ofertas por carácter de habilidad (tradicional / emergente)p. 59
- Figura 28. Top 10 habilidades técnicasp. 60
- Figura 29. Top 10 habilidades blandasp. 61
- Figura 30. Top 10 habilidades tradicionalesp. 62
- Figura 31. Top 10 habilidades emergentesp. 63