Data Engineer - Python / Pyspark (Álora)
A
arelance
📍 álora, andalucía, Spain
Job Description
Responsabilidades
- Desarrollo de pipelines de datos utilizando Python y PySpark.
- Transformación y procesamiento de datos mediante Apache Iceberg, PySpark y Dagster.
- Validación y despliegue de procesos de reaggregación (re-agg) de datos.
- Integración de datos desde Lakehouse hacia SingleStore (por ejemplo, datasets de awards).
- Diseño y optimización de transformaciones y flujos de datos.
- Colaboración con equipos técnicos en un entorno ágil e internacional.
Requisitos
- Experiencia en Python (incluyendo PySpark).
- Conocimientos sólidos de SQL.
- Experiencia en data pipelining y procesos de transformación de datos.
- Experiencia con Apache Iceberg y orquestadores como Dagster.
- Nivel de inglés B2 alto, con capacidad para mantener conversaciones fluidas con el equipo.
- Disponibilidad para modelo híbrido en Málaga.
Localización: Málaga
Modalidad:...