Software Engineer / Senior Data Engineer - AWC ECS / ETL/ELT / Airflow
Bolsinger Personalberatung
München, Germany
2 days ago
Role details
Contract type
Permanent contract Employment type
Part-time (≤ 32 hours) Working hours
Regular working hours Languages
German, English Experience level
SeniorJob location
München, Germany
Tech stack
Airflow
Amazon Web Services (AWS)
Amazon Web Services (AWS)
Data analysis
Code Review
Continuous Integration
Information Engineering
ETL
Relational Databases
Identity and Access Management
Python
Software Engineering
SQL Databases
Data Streaming
Grafana
Spark
Amazon Web Services (AWS)
Apache Flink
Cloudwatch
Software Version Control
Job description
- Entwicklung und Wartung containerisierter Services, die auf AWS ECS deployt sind
- Aufbau und Orchestrierung von Workflows mit Airflow und/oder Prefect
- Anwendung von Best Practices im Software Engineering, einschließlich modularem Design, Tests, CI/CD, Code-Reviews und Versionsverwaltung
- Entwurf und Pflege analysefähiger Datenmodelle für Trading-, Risiko- und Performance-Reports
- Enge Zusammenarbeit mit Tradern, Analysten und Engineers zur Definition von Metriken, KPIs und Datenverträgen
- Anbindung aufbereiteter Datensätze an Dashboards und BI-Tools (z. B. Grafana)
- Sicherstellung von Datenkorrektheit, Aktualität und Verfügbarkeit für geschäftskritische Dashboards
- Implementierung von Monitoring, Alerting, Retries und Backfills für Pipelines und Services
- Optimierung von Performance, Skalierbarkeit und Kosten über verschiedene AWS-Komponenten hinweg
- Dokumentation von Systemen, Services und Datenmodellen zur Unterstützung von Self-Service-Analytics
Requirements
Diese Position eignet sich besonders für Senior Engineers mit Erfahrung in der End-to-End-Verantwortung für produktive, geschäftskritische Datensysteme., * Umfassende Erfahrung im Data Engineering oder Software Engineering mit Fokus auf datenintensive Systeme
- Fundiertes Verständnis von ETL-/ELT-Mustern, Workflow-Orchestrierung und Datenmodellierung
- Praktische Produktionserfahrung mit Airflow und/oder Prefect
- Erfahrung im Betrieb containerisierter Workloads in der Produktion mit AWS ECS
- Sehr gute Python-Kenntnisse mit Fokus auf sauberen, wartbaren und testbaren Code
- Sehr gute SQL-Kenntnisse sowie Erfahrung mit relationalen Datenbanken
- Solide praktische Kenntnisse von AWS-Services (z. B. ECS, S3, IAM, CloudWatch)
- Erfahrung mit Infrastructure as Code
- Sehr gute Englischkenntnisse in Wort und Schrift
Wünschenswert (Nice to have):
- Erfahrung im Energiehandel, in Strommärkten, im Rohstoffhandel oder in Finanzmärkten
- Vertrautheit mit Zeitreihendaten, Marktpreiskurven und Forecast-Daten
- Erfahrung im Betrieb von Streaming-Systemen für Markt- oder operative Daten
- Praktische Erfahrung mit Apache Spark und/oder Apache Flink
- Kenntnisse von AWS-nativen Streaming-Tools (z. B. Kinesis)
- Erfahrung mit Data Observability, Datenqualitätsprüfungen und SLAs
- Berührungspunkte mit quantitativen, Prognose- oder Optimierungssystemen
Benefits & conditions
- Modernes Büro in München mit Hybrid-Arbeitsmodell (mindestens 2 Tage pro Woche im Büro, darüber hinaus Remote-Arbeit möglich; Wohnsitz in Deutschland bzw. gültiger Aufenthaltstitel erforderlich)
- Unbefristete Festanstellung in einem sehr modernen Unternehmen mit zukunftsorientierten Technologien
- Flache Hierarchien, dynamische nationale und internationale Teams, enge Zusammenarbeit und große Gestaltungsspielräume
- Vertrauensarbeitszeit, organisiert innerhalb der Teams
- Betriebliche Altersvorsorge, 30 Tage Urlaub, vergünstigte Konditionen in Fitnessstudios
- Umfangreiche Weiterbildungs- und Entwicklungsmöglichkeiten
About the company
* Festanstellung
* München, Office, hybrid
* Veröffentlicht vor 20 Stunden
Unser Mandant, ein Unternehmen mit Sitz in München, sucht einen Data Engineer / Software Engineer, der eine Energiehandelsplattform aufbaut und betreibt, welche den Energiehandel, Analysen sowie Entscheidungsprozesse unterstützt. Diese Position ist an der Schnittstelle zwischen Data Engineering und Software Engineering angesiedelt und umfasst die Verantwortung für skalierbare Services und Datenpipelines auf AWS.
In dieser Rolle entwerfen, implementieren und betreiben Sie Datenpipelines sowie langlebige Services, die große Mengen an Energiemarktdaten verarbeiten. Sie arbeiten eng mit Tradern, Analysten und weiteren Engineers zusammen, um sicherzustellen, dass geschäftskritische Daten für Dashboards und Entscheidungsunterstützungssysteme korrekt, verfügbar und zeitnah bereitgestellt werden.