Lead Data Engineer Azure Jobboard
Role details
Job location
Tech stack
Job description
Azure Jobboard presenteert een uitdagende Lead Data Engineer vacature van een toonaangevende organisatie in Amsterdam-Zuidoost. Ben jij klaar om een data engineering team te leiden en moderne cloud platforms te ontwerpen? Over de organisatie Onze organisatie is een erkende Great Place to Work en hun Data & Analytics team zorgt voor significante impact door middel van data en technologie. Zij bouwen veerkrachtige, schaalbare en veilige platforms die data-gedreven besluitvorming mogelijk maken voor interne en externe stakeholders. Jouw rol als Lead Data Engineer Als Lead Data Engineer rapporteer je aan de Group Data & Analytics Director en ben je eigenaar van het ontwerp, de ontwikkeling en het onderhoud van het complete data engineering ecosysteem. Wat ga je doen? - Leiden van ontwerp en implementatie van schaalbare ETL/ELT pipelines op Databricks - Werken binnen medallion architectuur (bronze, silver, gold) - Bouwen van metadata-gedreven, herbruikbare pipeline frameworks - Beheren en optimaliseren van Delta Lake en Azure Data Lake Storage Gen2 - Implementeren van data quality, governance en performance standards - Opzetten van monitoring, alerting en observability voor pipeline health - Ontwikkelen van APIs en backend services in Python (FastAPI, Flask, Django) - Engineeren van Azure-gebaseerd lakehouse platform - Gebruiken van Terraform en Azure DevOps voor IaC en CI/CD - Mentoren van junior data engineers - Samenwerken met data scientists en business teams Wat breng je mee? - Bachelor in Computer Science, Software Engineering of
Requirements
Data Engineering - 5+ jaar hands-on data engineering ervaring - 1-2+ jaar leidinggevende ervaring - Sterke Python skills - PySpark voor pipelines, FastAPI/Flask/Django - Solide SQL met track record in query optimalisatie - Hands-on ervaring met Databricks, Delta Lake en distributed data processing - Ervaring met API design en integratie patterns (REST/GraphQL) - Azure Cl...