Data Engineer
Role details
Job location
Tech stack
Job description
- Leiden van de migratie van bestaande machine learning-workflows en modellen van AWS SageMaker naar de omgevingen van Databricks en Azure Machine Learning.
- Ontwerpen, implementeren en optimaliseren van datastromen, en zorgen voor een vlotte data-inname, transformatie en opslag binnen Databricks.
- Samenwerken met teams voor gegevensbescherming, beveiliging en architectuur om naleving van bedrijfsnormen en regelgeving te waarborgen.
- Systeemvereisten coördineren met IT-, beveiligings- en privacy-teams om infrastructuur, toegangscontroles en beveiligingsprotocollen te garanderen.
- Best practices vaststellen voor gegevensbeheer, versiebeheer en documentatie binnen de nieuwe omgeving.
- Monitoren, problemen oplossen en onderhoud uitvoeren aan de performantie, betrouwbaarheid en beveiliging van het platform.
- Training en ondersteuning bieden aan teamleden over Databricks- en Azure ML-tools en workflows.
- Op de hoogte blijven van de laatste ontwikkelingen in Databricks, Azure ML en gerelateerde technologieën om het platform continu te verbeteren.
- Architectuur, processen en richtlijnen documenteren om onderhoudbaarheid en kennisdeling te garanderen.
Requirements
- Opleiding:
- Master in informatica, data science, ingenieurswetenschappen of een vergelijkbaar vakgebied.
- Relevante certificeringen in Azure (bijvoorbeeld Azure Data Engineer, Azure Data Scientist) en Databricks (Machine Learning Associate/Professional, Data Engineering Associate/Professional) zijn een pluspunt.
- Je spreekt vloeiend Frans of Nederlands en je hebt een goed niveau van het Engels.
- Technische vaardigheden:
- Uitgebreide ervaring met het Databricks-platform, inclusief Delta Lake, Spark en Mlflow.
- Goede kennis van Machine Learning-systemen, inclusief model-deployments, beheer en orkestratie (bvb. Azure Machine Learning, mlflow).
- Vaardigheid in Python, Scala of SQL voor dataverwerking en machine learning-workflows.
- Vertrouwd met best-practices van Python software en machine learning systemen: version control (git), feature stores, artifact registries, model registries, experiment tracking, FTI pipelines
- Kennis van cloudbeveiliging, regelgeving voor gegevensprivacy en best practices in cloudinfrastructuur.
- Professionele ervaring:
- Aantoonbare ervaring met het opzetten van en/of migreren van machine learning-workflows van andere platformen (zoals AWS SageMaker) naar Databricks en Azure ML.
- Praktische ervaring met het bouwen van schaalbare datastromen, ETL-processen en ML-model deployments.
- Ervaring met samenwerking met IT-, beveiligings- en privacy-teams om naleving en veiligheid te waarborgen.
- Ten minste 5 jaar beroepservaring in een relevant vakgebied.
- Interpersoonlijke vaardigheden:
- Sterke probleemoplossende vaardigheden en een proactieve aanpak voor platformonderhoud en optimalisatie.
- Uitstekende communicatievaardigheden voor samenwerking met diverse teams en stakeholders.
- Vermogen om processen duidelijk te documenteren en technische training te geven indien nodig.
Benefits & conditions
Een mooie beloning voor je werk Een competitief loon, eventueel aangevuld met discretionaire persoonlijke en collectieve premies en natuurlijk ook maaltijd- en ecocheques, een volledige terugbetaling van het openbaar vervoer en een cafetariaplan. Alle voordelen van werken bij een verzekeraar Van groepsverzekering tot ambulante en hospitalisatieverzekering (ook gezinsleden kunnen daarbij aansluiten aan een voordelig tarief) en met tot 30% korting op onze andere verzekeringsproducten. Een job die zich aanpast aan je leven en dromen Een flexibel rooster van 35 uur per week, 36 dagen verlof per jaar om op te laden, evenals de mogelijkheid om gedeeltelijk van thuis uit te werken. Wij bieden sportlessen op het werk, welzijnsprogramma's voor werknemers en trainingen, om u in topvorm te houden, zowel fysiek als mentaal.