Lead Data Platform Engineer / Solution Architect

Als Lead Data Platform Engineer / Solution Architect maak je onderdeel uit van het Data Office-team binnen de afdeling IT Services. Dit team is verantwoordelijk voor het ontsluiten en verwerken van data uit uiteenlopende bronnen en het beschikbaar stellen daarvan voor analyse- en rapportagedoeleinden.

Daarnaast ontwikkelt en beheert het team CREDO, het centrale data- en analyticsplatform van RET. Dit platform is gebaseerd op een lakehouse-architectuur in Microsoft Azure, met een Medallion Architectuur en Delta Lake.

Binnen deze opdracht speel je een sleutelrol bij de verdere ontwikkeling van CREDO en de transitie van Azure Synapse Analytics naar Microsoft Fabric.

Je bent verantwoordelijk voor het realiseren en bewaken van de beoogde solution architectuur. Daarbij zorg je ervoor dat Azure Synapse en Microsoft Fabric tijdens de overgang beheerst naast elkaar kunnen functioneren en werk je aan een toekomstbestendig, betrouwbaar en schaalbaar dataplatform.

Je vertaalt de technische roadmap naar concrete oplossingen en richt je op het verbeteren van performance, datakwaliteit, beheerbaarheid en kostenbeheersing.

Daarnaast ontwerp, ontwikkel en onderhoud je het metadata-driven framework, inclusief datamodellen, orchestration en datapipelines. Je zorgt voor een robuuste inrichting van CI/CD, release management en security en draagt bij aan het standaardiseren en automatiseren van ontwikkel- en beheerprocessen.

Je werkt nauw samen met andere data-engineers, architecten, data-analisten en stakeholders binnen de verschillende businessunits. Je adviseert over technische haalbaarheid, data governance en platformverbeteringen en vertaalt informatiebehoeften naar passende technische oplossingen.

Naast je inhoudelijke verantwoordelijkheden vervul je een belangrijke rol in de ontwikkeling van het Data Office-team. Je begeleidt en coacht andere data-engineers, stimuleert kennisdeling en helpt bij het verder professionaliseren van Agile werken, Azure DevOps en metadata-driven ontwikkeling.

Je zorgt ervoor dat kennis structureel wordt vastgelegd en overgedragen, zodat RET het platform zelfstandig kan beheren en verder ontwikkelen.

Met jouw diepgaande technische expertise, architectuurkennis en leiderschapskwaliteiten draag je direct bij aan een betrouwbaar, efficiënt en toekomstbestendig dataplatform.

• Ontwerpen, realiseren en bewaken van de solution architectuur van het CREDO-dataplatform.
• Leiden en begeleiden van de migratie van Azure Synapse Analytics naar Microsoft Fabric.
• Zorgen voor een beheerste overgang waarbij Azure Synapse en Microsoft Fabric tijdelijk naast elkaar kunnen functioneren.
• Uitvoeren van de technische architectuurroadmap en het vastgestelde solutionontwerp.
• Ontwerpen, bouwen en onderhouden van het metadata-driven framework.
• Ontwikkelen en optimaliseren van datamodellen, orchestration en datapipelines.
• Optimaliseren van performance, kosten en schaalbaarheid van het dataplatform.
• Opzetten en beheren van CI/CD-pipelines en release governance.
• Waarborgen van betrouwbare, traceerbare en veilige deployments.
• Uitbreiden en bewaken van het data quality framework.
• Implementeren van geautomatiseerde datakwaliteitscontroles binnen ETL/ELT-processen.
• Structureren en beheren van SQL-gebaseerde omgevingen.
• Bewaken van operationele kwaliteit, betrouwbaarheid, onderhoudbaarheid en capaciteit van het platform.
• Inrichten en verbeteren van monitoring en oplossen van technical debt.
• Verankeren van Agile werken en Azure DevOps binnen Data Office.
• Bijdragen aan kwartaalplanning en het werken met epics, features en user stories.
• Adviseren van stakeholders over data governance en technische haalbaarheid.
• Vertalen van requirements naar technische specificaties voor data-oplossingen.
• Bijdragen aan data literacy en self-service analytics.
• Coachen en begeleiden van data-engineers, zowel individueel als in teamverband.
• Borgen van documentatie, kennisoverdracht en technische standaarden.

Je bent een zeer ervaren data platform engineer en solution architect met diepgaande kennis van moderne cloudgebaseerde dataplatformen.

Je hebt meer dan tien jaar ervaring met het ontwerpen, implementeren en beheren van dataplatformen en hebt gedurende meerdere jaren een leidende rol vervuld.

Je hebt aantoonbare ervaring met het opbouwen en begeleiden van multidisciplinaire engineeringteams en weet hoe je technische richting geeft aan complexe dataplatformimplementaties.

Je beschikt over uitgebreide kennis van Microsoft Azure, Azure Synapse Analytics en/of Microsoft Fabric en bent vertrouwd met lakehouse-architecturen, Medallion-principes en metadata-driven dataplatformen.

Daarnaast heb je ruime ervaring met dimensioneel datamodelleren, SQL, Python en notebooks. Je weet hoe je schaalbare en efficiënte datapipelines ontwikkelt en hoe je performance, datakwaliteit en kosten structureel optimaliseert.

Je hebt ervaring met het standaardiseren en automatiseren van ontwikkelprocessen, het inrichten van CI/CD-pipelines en het werken met Azure DevOps en Git.

Je begrijpt de volledige keten van een dataplatform, van requirements en architectuur tot implementatie, beheer en kennisoverdracht.

Naast je technische expertise beschik je over sterke communicatieve en coachende vaardigheden. Je weet complexe technische vraagstukken begrijpelijk uit te leggen en kunt stakeholders meenemen in nieuwe oplossingen en werkwijzen.

Je bent proactief, zelfstandig en resultaatgericht. Je neemt initiatief, signaleert problemen tijdig en weet deze te vertalen naar duurzame en schaalbare oplossingen.

Met jouw technische leiderschap en vermogen om teams verder te ontwikkelen, draag je bij aan de succesvolle migratie naar Microsoft Fabric en de verdere professionalisering van het Data Office-team.

• Je hebt meer dan 10 jaar ervaring met het ontwerpen, implementeren en beheren van dataplatformen, waarvan meer dan 5 jaar in een leidende rol.
• Je hebt meerdere keren succesvol een multidisciplinair datateam van minimaal 5 fte opgebouwd en begeleid, van ontwerp en implementatie tot coaching, productiegang en beheer.
• Je hebt minimaal 5 jaar ervaring binnen Microsoft Azure-omgevingen met Azure Synapse Analytics en/of Microsoft Fabric.
• Je hebt ervaring met lakehouse-architecturen en Medallion-principes.
• Je hebt uitgebreide kennis van en minimaal 5 jaar ervaring met metadata-driven dataplatformen.
• Je hebt minimaal 2 succesvolle implementaties van een nieuw dataplatform gerealiseerd, waarbij je een engineeringteam hebt begeleid en stakeholderadoptie hebt gerealiseerd binnen een organisatie met meer dan 1.000 medewerkers.
• Je hebt uitgebreide kennis van en minimaal 5 jaar ervaring met dimensioneel datamodelleren, SQL, Python en notebooks.
• Je hebt meer dan 5 jaar ervaring met het standaardiseren en automatiseren van workflows en CI/CD-pipelines, inclusief Azure DevOps, Git en CI/CD-principes.

• Je hebt ervaring met werken in een Agile omgeving.

• Je hebt relevante certificeringen op het gebied van architectuur.
• Je hebt relevante certificeringen op het gebied van data-analyse en datamodellering.

• Je hebt relevante certificeringen op het gebied van Agile werken, bijvoorbeeld Scrum.

• Je bent communicatief sterk en kunt effectief communiceren met alle niveaus binnen een organisatie.
• Je bent proactief en stapt gemakkelijk op mensen af.
• Je bent een zelfstarter en vindt snel je weg in een nieuwe werkomgeving.
• Je bent probleemoplossend en weet technische knelpunten snel te identificeren en op te lossen.
• Je bent analytisch sterk en kunt complexe datavraagstukken vertalen naar schaalbare en efficiënte oplossingen.
• Je bent een technisch en inhoudelijk leider die richting kan geven aan een team van engineers.
• Je bent coachend en weet technische teams en individuele medewerkers verder te ontwikkelen.
• Je bent in staat om nieuwe platformen en werkwijzen succesvol binnen een organisatie te implementeren.
• Je bent in staat om de volledige dataplatformketen te overzien, van requirements en architectuur tot implementatie, beheer en overdracht.

De RET verzorgt het openbaar vervoer in Rotterdam en omgeving en werkt voortdurend aan het verbeteren van haar dienstverlening en interne processen. Data speelt hierbij een steeds belangrijkere rol. Betrouwbare, goed toegankelijke en hoogwaardige informatie ondersteunt de organisatie bij het verbeteren van de operationele efficiëntie en het nemen van datagedreven beslissingen.