(Senior) Data Engineer Streaming

SThree GmbH
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
German
Experience level
Senior
Compensation
€ 90K

Job location

Tech stack

Google BigQuery
Cloud Computing
Continuous Integration
Information Engineering
Data Governance
ETL
DevOps
Data Flow Control
Python
Queueing Systems
Data Streaming
Google Cloud Platform
Spark
Terraform
Apache Beam

Job description

  • Konzeption, Entwicklung und Betrieb von Echtzeit-Streaming-Pipelines
  • Implementierung skalierbarer ETL/ELT-Prozesse für Streaming- und Batch-Daten
  • Integration und Zusammenführung verschiedener Datenquellen zu konsistenten Datensätzen
  • Sicherstellung von Datenqualität, Zuverlässigkeit und Observability
  • Optimierung von Datenprozessen hinsichtlich Performance und Kosten in der Cloud
  • Umsetzung von Best Practices in CI/CD, Infrastructure-as-Code und Monitoring
  • Mitarbeit an Themen wie Data Governance, Security und Compliance

Requirements

  • Mehrjährige Erfahrung (mind. 4 Jahre) im Data Engineering, insbesondere im Bereich Streaming
  • Sehr gute Kenntnisse in Google Cloud Platform (z. B. Dataflow, Pub/Sub, BigQuery)
  • Erfahrung mit Apache Beam oder vergleichbaren Technologien (z. B. Spark, Flink)
  • Gute Programmierkenntnisse in Python
  • Erfahrung in Datenmodellierung und dem Umgang mit verschiedenen Datenquellen
  • Kenntnisse in Cloud-DevOps (z. B. Terraform, CI/CD)
  • Erfahrung mit Monitoring- und Observability-Tools
  • Verständnis von Event-driven Architekturen und Message Queues
  • Erfahrung in hochskalierenden, geschäftskritischen Datenumgebungen

Benefits & conditions

SThree Germany Hamburg €70000 - €90000 per annum + 30 Tage Urlaub, Rente Unbefristet Vollzeit, * Arbeit an modernen Data & AI Plattformen mit neuesten Technologien

  • Hoher Gestaltungsspielraum und Verantwortung
  • Office in Hamburg & Berlin
  • Flexible Arbeitsmodelle (Remote/Hybrid)
  • Spannende Projekte mit direktem Business Impact
  • Attraktive Entwicklungsmöglichkeiten

Apply for this position