Data Engineer - Real-time Streaming Data (Dutch-speaking)
Nederlandse Spoorwegen
Utrecht, Netherlands
2 days ago
Role details
Contract type
Permanent contract Employment type
Full-time (> 32 hours) Working hours
Shift work Languages
Dutch Experience level
IntermediateJob location
Remote
Utrecht, Netherlands
Tech stack
Java
Agile Methodologies
Advanced Message Queuing Protocol
Automation of Tests
Azure
Big Data
Databases
Continuous Integration
Information Engineering
Python
RabbitMQ
Scala
Data Streaming
Data Processing
PySpark
Bicep
Kafka
Spark Streaming
Terraform
Databricks
Job description
Ontwikkelen van schaalbare data-oplossingen die het verkeer verbeteren
- Samenwerken met collega Data Engineers aan geavanceerde data-oplossingen
- Bijdragen aan het ontwerp en de implementatie van data-oplossingen voor analytics teams
- Bouwen en onderhouden van real-time streaming platformen
- Zorgen voor betrouwbare en efficiënte verwerking van data
- Voldoen aan security- en privacyvereisten van NS
- Inrichten van de data pipeline tussen databronnen en analytics teams
- Opzetten en beheren van de CI/CD pipeline
- Bouwen in de Azure cloud omgeving aan een fundament voor streaming en sensorische databronnen
- Achterhalen van de vraag achter de vraag voor passende oplossingen
Requirements
Minimaal 7 jaar ervaring met het verwerken van grote hoeveelheden data
- Minimaal 3 jaar ervaring met Spark Structured Streaming
- Minimaal 7 jaar ervaring met Python en PySpark
- Ervaring met het ontwikkelen van CI/CD-pipelines en geautomatiseerd testen
- Ervaring met Infrastructure-as-Code
- Ervaring met Java en/of Scala
- Ervaring met Microsoft Azure, Databricks, Azure DevOps, Terraform en/of Bicep, OpenTofu, Kafka, AMQP, RabbitMQ en/of Event Hub
- Actueel en relevant inzicht in technologische ontwikkelingen binnen dit domein
- Zelfstarter die graag werkt in een Agile omgeving
- Waarde- en organisatiegerichte mindset
- Uitstekende beheersing van de Nederlandse taal, zowel mondeling als schriftelijk
- Bereidheid om bereikbaarheidsdiensten te doen in de toekomst
- Proactief handelen en zelfstandig initiatieven nemen
About the company
Bij NS maken we duurzame impact door schaalbare data-oplossingen te ontwikkelen die Nederland bereikbaar houden. Wij bieden een leerrijke omgeving in ons dynamische IoTeam, dat bestaat uit vijf Data Engineers, een Product Owner en een Scrum Master. Ons hoofdkantoor is gevestigd in Utrecht, nabij het Centraal Station, en biedt deels de mogelijkheid om hybride vanuit huis te werken. We hechten veel waarde aan diversiteit en inclusie en streven naar een professionele, output-gestuurde werkomgeving. Bij ons vind je uitstekende arbeidsvoorwaarden, inclusief een concurrerend salaris, vakantiedagen, en flexibele werktijden en thuiswerkmogelijkheden.
6955f66f26471187826993e7