INGENIERÍA DE DATOS CON EL FRAMEWORK DE BIG DATA SPARK Y SCALA
Authors
Abstract
Este trabajo fin de grado se centra en la extracción masiva de datos meteorológicos del
territorio español y su posterior tratamiento con el fin de conseguir resultados que sean
capaces de ser interpretados mediante un proceso completamente informatizado. Este tipo
de estudios, en un mundo donde la información es uno de los bienes más valiosos del ser
humano, son fundamentales para el conocimiento del entorno, especialmente, el clima, un
elemento capital en la vida de todas las personas, cuyo entendimiento condiciona el día a
día.
Con todo ello, se ha decidido confeccionar un sistema de extracción, consulta y análisis
usando el lenguaje Scala y haciendo uso del framework Spark, creando una aplicación de
big data que extrae información de los repositorios de datos abiertos tanto de la Agencia
Estatal de Meteorología (AEMET) y del Instituto Andaluz de Investigación y Formación
Agraria, Pesquera, Alimentaria y de la Producción Ecológica (IFAPA). Posteriormente
se procesa, se da formato a la información y se extraen conclusiones mediante diferentes
consultas con las que finalmente se generan gráficos, valiéndose de un servicio web
desarrollado en lenguaje Python, a modo de resultado.
Estos resultados podrán ser accedidos desde una página web habilitada a cualquier usuario
que desee consultar la información. Con ello, se pueden apreciar resultados sobre
diferentes estudios como la distribución de estaciones meteorológicas por altitud, provincia...
etc. Análisis de los diferentes climas de España. Estudios sobre variables climáticas
individuales como la temperatura, presión o radicación solar, mostrando su evolución temporal,
máximos y mínimos históricos, distribución a lo largo del territorio español...etc.
Finalmente, estudios interesantes como la correlación entre la precipitación y la presión
o lugares más propensos a sufrir eventos meteorológicos adversos o idóneos para el uso de
elementos naturales como el viento o la luz solar.
Journal Title
Journal ISSN
Volume Title
Publisher
Universidad Rey Juan Carlos
URL external
External URL
DOI
Date
Description
Trabajo Fin de Grado leído en la Universidad Rey Juan Carlos en el curso académico 2025/2026. Directores/as: Juan Manuel Serrano Hidalgo

