Item type: Item , Access status: Restricted , Add to my list

INGENIERÍA DE DATOS CON EL FRAMEWORK DE BIG DATA SPARK Y SCALA

Abstract

Este trabajo fin de grado se centra en la extracción masiva de datos meteorológicos del territorio español y su posterior tratamiento con el fin de conseguir resultados que sean capaces de ser interpretados mediante un proceso completamente informatizado. Este tipo de estudios, en un mundo donde la información es uno de los bienes más valiosos del ser humano, son fundamentales para el conocimiento del entorno, especialmente, el clima, un elemento capital en la vida de todas las personas, cuyo entendimiento condiciona el día a día. Con todo ello, se ha decidido confeccionar un sistema de extracción, consulta y análisis usando el lenguaje Scala y haciendo uso del framework Spark, creando una aplicación de big data que extrae información de los repositorios de datos abiertos tanto de la Agencia Estatal de Meteorología (AEMET) y del Instituto Andaluz de Investigación y Formación Agraria, Pesquera, Alimentaria y de la Producción Ecológica (IFAPA). Posteriormente se procesa, se da formato a la información y se extraen conclusiones mediante diferentes consultas con las que finalmente se generan gráficos, valiéndose de un servicio web desarrollado en lenguaje Python, a modo de resultado. Estos resultados podrán ser accedidos desde una página web habilitada a cualquier usuario que desee consultar la información. Con ello, se pueden apreciar resultados sobre diferentes estudios como la distribución de estaciones meteorológicas por altitud, provincia... etc. Análisis de los diferentes climas de España. Estudios sobre variables climáticas individuales como la temperatura, presión o radicación solar, mostrando su evolución temporal, máximos y mínimos históricos, distribución a lo largo del territorio español...etc. Finalmente, estudios interesantes como la correlación entre la precipitación y la presión o lugares más propensos a sufrir eventos meteorológicos adversos o idóneos para el uso de elementos naturales como el viento o la luz solar.

Journal Title

Journal ISSN

Volume Title

Publisher

Universidad Rey Juan Carlos

URL external

External URL

DOI

Description

Trabajo Fin de Grado leído en la Universidad Rey Juan Carlos en el curso académico 2025/2026. Directores/as: Juan Manuel Serrano Hidalgo

Citation

Endorsement

Review

Supplemented By

Referenced By

Statistics

Views
3
Downloads
0

Bibliographic managers