Data Engineer

Als data engineer werk je aan een vernieuwend Azure dataplatform dat de basis vormt voor datagedreven werken binnen een overheidsdepartement. Je bent de technische ruggengraat voor complexe datavraagstukken en draagt bij aan de migratie en doorontwikkeling van het platform. Je werkt samen met een beheerpartij en denkt mee over innovatieve toepassingen zoals AI. Deze opdracht biedt een uitdagende combinatie van techniek, samenwerking en impact op belangrijke data-initiatieven.

De opdracht vindt plaats binnen het Datalab van een ministerie dat verantwoordelijk is voor volksgezondheid, welzijn en sport. Dit Datalab beheert en ontwikkelt een Azure dataplatform waarop diverse directies hun data-initiatieven onderbrengen. Het doel is het onderhouden van de bestaande omgeving en het realiseren van een migratie naar een vernieuwd platform, inclusief het ontsluiten van bronsystemen via API’s.

Je ontwerpt en implementeert ETL/ELT-processen met Python en PySpark om data van bron tot productielaag in het data lake te brengen. Daarnaast onderhoud je de centrale semantische modellen voor stabiele Power BI-rapportages en ben je het aanspreekpunt voor het Azure dataplatform en complexe datatransformaties. Je werkt nauw samen met het team en de beheerpartij en verkent actief hoe AI kan bijdragen aan het verlagen van de werklast bij operationele teams.

De eisen zijn knock-outcriteria. Eisen: - Je beschikt over minimaal HBO werk- en denkniveau, wat kan worden aangetoond door een afgeronde HBO-opleiding en/of aantoonbare werkervaring van minimaal drie jaar op HBO-niveau. - Je beschikt over minimaal 3 jaar aantoonbare werkervaring als data engineer op Microsoft Azure. - Je beschikt over aantoonbare kennis van en ervaring met Databricks, Python en PySpark. - Je beschikt aantoonbaar over minimaal 3 jaar kennis van en ervaring met datamodellering, ETL-processen en het bouwen van pipelines…