Data Engineer - Python / Pyspark (Álora)

arelance

📍 álora, andalucía, Spain

Full-time Informática y tecnología

Job Description

Responsabilidades

  • Desarrollo de pipelines de datos utilizando Python y PySpark.
  • Transformación y procesamiento de datos mediante Apache Iceberg, PySpark y Dagster.
  • Validación y despliegue de procesos de reaggregación (re-agg) de datos.
  • Integración de datos desde Lakehouse hacia SingleStore (por ejemplo, datasets de awards).
  • Diseño y optimización de transformaciones y flujos de datos.
  • Colaboración con equipos técnicos en un entorno ágil e internacional.

Requisitos

  • Experiencia en Python (incluyendo PySpark).
  • Conocimientos sólidos de SQL.
  • Experiencia en data pipelining y procesos de transformación de datos.
  • Experiencia con Apache Iceberg y orquestadores como Dagster.
  • Nivel de inglés B2 alto, con capacidad para mantener conversaciones fluidas con el equipo.
  • Disponibilidad para modelo híbrido en Málaga.

Localización: Málaga

Modalidad:...

Apply for this Position