Perfil Data Engineer - Especialista en Data Lake (Málaga)

Responsabilidades

• Diseñar y mantener pipelines de datos utilizando PySpark y SQL.
• Gestionar y optimizar la ingesta, procesamiento y almacenamiento de datos en el Data Lake.
• Preparar y estructurar datos para su visualización en Power BI.
• Colaborar con otros equipos para asegurar que los datos sean precisos, completos y accesibles.
• Identificar y resolver problemas relacionados con la calidad y consistencia de los datos.

Requisitos

• Ser Data Engineer con experiencia en el diseño, implementación y mantenimiento de arquitecturas de datos escalables y eficientes utilizando PySpark y SQL.
• Objetivo: procesar y transformar grandes volúmenes de datos para su posterior visualización y análisis en BI como Power BI.
• Experiencia en PySpark para el procesamiento de datos a gran escala y la creación de pipelines; sólidos conocimientos en SQL para la consulta y manipulación de datos; experiencia en el d...