Senior Data Engineer

Computer Futures Solutions GmbH

Dresden, Germany

1 day ago

Apply on www.adzuna.de

Prepare application

Role details

Contract type

Temporary contract

Employment type

Full-time (> 32 hours)

Experience level

Expert

Compensation

€90,000.0 - €100,000.0

Working hours

Regular working hours

Job source

www.adzuna.de

Tech stack

Airflow Amazon S3 Apache HTTP Server Bash Shell Cloud Engineering Linux Python (Programming Language) SQL Databases Data Streaming Management of Software Versions Data Processing Apache Spark

+5 more

Kubernetes Information Technology Apache Flink Apache Kafka Golang

Job description

Entwicklung und Integration einer modernen Datenplattform
Aufbau und Automatisierung von Plattformservices
Entwicklung von Batch- und Streaming-Datenpipelines
Integration von Kubernetes-Workloads
Anbindung von S3-kompatiblen Storage-Lösungen
Evaluierung und Integration von Data-Catalog- und Data-Versioning-Lösungen
Durchführung technischer Proof of Concepts
Zusammenarbeit mit Architektur-, Infrastruktur- und Security-Teams, * Hoher Gestaltungsspielraum
Moderne Cloud-Native-Technologien
Direkte Zusammenarbeit mit erfahrenen Architekten
Langfristige Perspektive in einem innovativen Umfeld
Möglichkeit, neue Technologien aktiv einzubringen

Requirements

Studium der Informatik oder vergleichbare Qualifikation
Mehrjährige Erfahrung mit Kubernetes und Linux
Erfahrung mit modernen Datenplattform-Architekturen
Kenntnisse in Batch- und Echtzeit-Datenverarbeitung
Sehr gute Kenntnisse in Python, Golang, SQL und Bash
Erfahrung mit Container-Technologien und Cloud-Native-Umgebungen
Idealerweise Erfahrung mit Apache Iceberg, Spark, Kafka, Flink, Airflow oder Dagster
Interesse an innovativen Technologien und Proof-of-Concept-Entwicklung