Data Platform Enginner
Role details
Job location
Tech stack
Job description
- Du begleitest Initiativen zur Vernetzung bislang isolierter Datenbereiche und realisierst dazu den Auf- und Ausbau einer skalierbaren Dateninfrastruktur
- Du entwickelst Konzepte zur Echtzeit-Speicherung und Verarbeitung von Kundendaten in der Dateninfrastruktur
- Du baust ETL-Strecken rund um die Sammlung, Speicherung, Pflege, Aufbereitung, Anreicherung und Weitergabe von Daten auf
- Du befähigst Teams, neue Automatisierungslösungen zu erforschen, z.B. durch Benchmarks mit aktuellen LLM-Modellen
Requirements
Als erfahrene:r Data Platform Engineer mit mehrjähriger Berufserfahrung findest du gemeinsam mit deinen Teamkolleg:innen Wege, die Dateninfrastruktur skalierend weiterzuentwickeln und gleichzeitig die Echtzeit-Interaktion mit unserem Daten Ökosystem voranzutreiben. Dies erfordert die Kommunikation mit anderen Teams und eine strukturierte und strategisch weitsichtige Vorgehensweise: Du erkennst Muster in den Fragestellungen der Feature Teams, clusterst diese, lieferst Input für das passende System Design und treibst somit die Automatisierung im Produkt voran. Der gemeinsame Nordstern: Durch aktiv gelebte Feedback Kultur zu noch besserem Data Driven Decision Making, * Du kennst dich in Cloud Umgebungen (AWS, Google, Azure) und mit gängigen Data Engineering Tools (z.B. für die Orchestrierung von Daten Pipelines via ETL) aus
- Dein Verständnis von SQL, Python und Infrastructure-as-Code Tools (z.B. Terraform, CloudFormation) helfen dir neue Funktionen zu implementieren, bestehende zu pflegen und die internen Kunden in die Lage zu versetzen, Hindernisse auf dem Weg zu Erkenntnissen zu überwinden
- Praktische Erfahrung mit Big Data Frameworks (z.B. Hadoop, Spark, Airflow) sind ein großes Plus. Idealerweise kennst du dich auch mit Event-basierter Datenspeicherung aus und hast dieses Konzept bereits angewendet (z.B. Apache Kafka, AWS Kinesis o.ä.)
- Idealerweise hast du Erfahrungen in der Zusammenarbeit an Proof-of-Concept Lösungen und Benchmarks
- Du sprichst fließend Englisch. Die Arbeitssprache im Team ist Englisch. Zusätzlich sind Deutschkenntnisse sehr hilfreich, um mit den umliegenden Teams zu kommuniziere