Lead Data Engineer Azure Jobboard

DATA
Amsterdam, Netherlands
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
Dutch
Experience level
Senior

Job location

Amsterdam, Netherlands

Tech stack

API
Azure
Continuous Integration
Information Engineering
ETL
Django
Python
Metadata
Azure
Software Engineering
SQL Databases
Data Processing
Flask
Backend
FastAPI
Data Lake
PySpark
Information Technology
Data Analytics
GraphQL
Terraform
Databricks

Job description

Azure Jobboard presenteert een uitdagende Lead Data Engineer vacature van een toonaangevende organisatie in Amsterdam-Zuidoost. Ben jij klaar om een data engineering team te leiden en moderne cloud platforms te ontwerpen? Over de organisatie Onze organisatie is een erkende Great Place to Work en hun Data & Analytics team zorgt voor significante impact door middel van data en technologie. Zij bouwen veerkrachtige, schaalbare en veilige platforms die data-gedreven besluitvorming mogelijk maken voor interne en externe stakeholders. Jouw rol als Lead Data Engineer Als Lead Data Engineer rapporteer je aan de Group Data & Analytics Director en ben je eigenaar van het ontwerp, de ontwikkeling en het onderhoud van het complete data engineering ecosysteem. Wat ga je doen? - Leiden van ontwerp en implementatie van schaalbare ETL/ELT pipelines op Databricks - Werken binnen medallion architectuur (bronze, silver, gold) - Bouwen van metadata-gedreven, herbruikbare pipeline frameworks - Beheren en optimaliseren van Delta Lake en Azure Data Lake Storage Gen2 - Implementeren van data quality, governance en performance standards - Opzetten van monitoring, alerting en observability voor pipeline health - Ontwikkelen van APIs en backend services in Python (FastAPI, Flask, Django) - Engineeren van Azure-gebaseerd lakehouse platform - Gebruiken van Terraform en Azure DevOps voor IaC en CI/CD - Mentoren van junior data engineers - Samenwerken met data scientists en business teams Wat breng je mee? - Bachelor in Computer Science, Software Engineering of

Requirements

Data Engineering - 5+ jaar hands-on data engineering ervaring - 1-2+ jaar leidinggevende ervaring - Sterke Python skills - PySpark voor pipelines, FastAPI/Flask/Django - Solide SQL met track record in query optimalisatie - Hands-on ervaring met Databricks, Delta Lake en distributed data processing - Ervaring met API design en integratie patterns (REST/GraphQL) - Azure Cl...

Apply for this position