Senior Data Engineer

In der Rolle als Senior Data Engineer - Integrationen sind Sie verantwortlich für den Aufbau und die Optimierung unserer massiv skalierbaren Datenverarbeitungs-Pipelines und Integrationen, die Terabytes von Daten an externe Partner übertragen. Sie werden Teil eines dynamischen Teams von fünf Backend-Entwicklern und einem technischen Produktverantwortlichen, wodurch Sie als siebtes Teammitglied wertvolle Expertise im Bereich Data Engineering einbringen. Unter der Anleitung des technischen Teamleiters haben Sie die Möglichkeit, sich mit Datenprofis aus anderen Teams auszutauschen und von deren Erfahrungen zu lernen. Zukünftig planen wir, weitere Ressourcen im Bereich Datenanalytik in unser Team zu integrieren. Zu Ihren Aufgaben gehört die Arbeit in einem selbstorganisierten agilen Team mit einem hohen Maß an Eigenverantwortung, wobei Sie aktiv die Teamkultur mitgestalten. Sie entwerfen, bauen und standardisieren datenschutzfreundliche Big Data-Architekturen, große Datenpipelines und fortschrittliche Analyse-Lösungen in der AWS-Umgebung. Zudem entwickeln Sie komplexe Integrationen mit Drittanbietern, um große Datenmengen zu übertragen. Sie stimmen sich mit anderen Datenexperten ab, um Best Practices und Standards im Bereich Datenanalytik zu etablieren und in das Team einzuführen, um bestehende Datenpipelines zu verbessern und neue zu erstellen. Darüber hinaus arbeiten Sie eng mit unserem Produktteam zusammen, um kontinuierlich neue Funktionen unserer Plattform zu entwickeln und zu verbessern.

Der ideale Kandidat bringt mehr als vier Jahre Erfahrung in einer ähnlichen Position mit. Sie verfügen über umfassende Kenntnisse in Python, während Kenntnisse in Java oder Scala von Vorteil sind. Praktische Erfahrung im Aufbau skalierbarer Lösungen in der AWS-Umgebung ist erforderlich. Sie sollten über Fachkenntnisse in NoSQL- und SQL-Datenbanken sowie in architektonischen Technologien mit hohem Datenaufkommen verfügen, wie z.B. Kafka, Spark, Hadoop, MongoDB, AWS Batch, AWS Glue, Athena, Airflow und dbt. Hervorragende SQL- und Datenumwandlungsfähigkeiten sind ebenso wichtig wie ausgezeichnete schriftliche und mündliche Kommunikationsfähigkeiten, um komplexe technische Informationen verständlich zu vermitteln. Zudem haben Sie Erfahrung darin, junior Teammitglieder in einem kollaborativen Umfeld zu führen und zu betreuen.

Technologien

Python Java MongoDB AWS Kafka

Soft Skills

Teamfähigkeit Kommunikation Analytisches Denken