Software Engineer Data Quality Framework
B
Bright Professionals
📍 Heerlen, Limburg, Netherlands
Job Description
Voor APG zoeken wij een Software Engineer Data Quality Framework. Als Senior Data Quality Framework Developer bouw en verbeter je een data quality framework in Databricks met PySpark en vertaal je data quality-behoeften naar schaalbare, onderhoudbare oplossingen.
Je combineert sterke software engineering met platformdenken en draagt verantwoordelijkheid voor de kwaliteit en betrouwbaarheid van de oplossing.
Wat ga je doen
Je combineert sterke software engineering met platformdenken en draagt verantwoordelijkheid voor de kwaliteit en betrouwbaarheid van de oplossing.
Wat ga je doen
- Ontwerpen, ontwikkelen en verbeteren van een PySpark-gebaseerd data quality framework en herbruikbare validatiecomponenten in Databricks.
- Opzetten en onderhouden van rule-executie, result handling en contract-gedreven validatie.
- Zorgen voor engineeringkwaliteit door refactoring, testing, CI/CD, packaging en releasepraktijken.
- Ondersteunen van Databricks-operaties zoals jobs, alerts, triggers en notificaties en het opzetten van multi-omgeving deployments.
- Samenwerken met stakeholders om requirement...