(Senior) Data Engineer Streaming
SThree GmbH
2 days ago
Role details
Contract type
Permanent contract Employment type
Full-time (> 32 hours) Working hours
Regular working hours Languages
German Experience level
Senior Compensation
€ 90KJob location
Tech stack
Google BigQuery
Cloud Computing
Continuous Integration
Information Engineering
Data Governance
ETL
DevOps
Data Flow Control
Python
Queueing Systems
Data Streaming
Google Cloud Platform
Spark
Terraform
Apache Beam
Job description
- Konzeption, Entwicklung und Betrieb von Echtzeit-Streaming-Pipelines
- Implementierung skalierbarer ETL/ELT-Prozesse für Streaming- und Batch-Daten
- Integration und Zusammenführung verschiedener Datenquellen zu konsistenten Datensätzen
- Sicherstellung von Datenqualität, Zuverlässigkeit und Observability
- Optimierung von Datenprozessen hinsichtlich Performance und Kosten in der Cloud
- Umsetzung von Best Practices in CI/CD, Infrastructure-as-Code und Monitoring
- Mitarbeit an Themen wie Data Governance, Security und Compliance
Requirements
- Mehrjährige Erfahrung (mind. 4 Jahre) im Data Engineering, insbesondere im Bereich Streaming
- Sehr gute Kenntnisse in Google Cloud Platform (z. B. Dataflow, Pub/Sub, BigQuery)
- Erfahrung mit Apache Beam oder vergleichbaren Technologien (z. B. Spark, Flink)
- Gute Programmierkenntnisse in Python
- Erfahrung in Datenmodellierung und dem Umgang mit verschiedenen Datenquellen
- Kenntnisse in Cloud-DevOps (z. B. Terraform, CI/CD)
- Erfahrung mit Monitoring- und Observability-Tools
- Verständnis von Event-driven Architekturen und Message Queues
- Erfahrung in hochskalierenden, geschäftskritischen Datenumgebungen
Benefits & conditions
SThree Germany Hamburg €70000 - €90000 per annum + 30 Tage Urlaub, Rente Unbefristet Vollzeit, * Arbeit an modernen Data & AI Plattformen mit neuesten Technologien
- Hoher Gestaltungsspielraum und Verantwortung
- Office in Hamburg & Berlin
- Flexible Arbeitsmodelle (Remote/Hybrid)
- Spannende Projekte mit direktem Business Impact
- Attraktive Entwicklungsmöglichkeiten