Senior Data Engineer - Data Platform Architecture
E.ON
2 days ago
Role details
Contract type
Temporary contract Employment type
Full-time (> 32 hours) Working hours
Regular working hours Languages
English, German Experience level
SeniorJob location
Tech stack
Azure
Information Engineering
Data Integration
ETL
Data Mining
Python
Scala
SQL Databases
Azure
Spark
Codebase
Databricks
Job description
- Datenintegration: Du unterstutzt alle Datenintegrationsaktivitaten fur das neue Produkt innerhalb der bestehenden iPEN-Plattform (Databricks, Unity Catalog).
- Quellsystemanbindung: Du gestaltest den Prozess zur Anbindung der Quellsysteme und begleitest die Transformation in das gemeinsame Datenmodell.
- Enablement: Du befahigst die Data Engineers der Netzbetreiber, aktiv zur ETL-Codebasis beizutragen und forderst die Wiederverwendung von Code.
- Pipeline-Entwicklung: Du implementierst ETL-Pipelines zur Datenextraktion und sorgst fur deren Effizienz.
- Betriebssicherheit: Du verantwortest den stabilen und zuverlassigen Betrieb der Datenpipelines.
Requirements
- Azure-Erfahrung: Du bringst fundierte Kenntnisse im Microsoft Azure Technologie-Stack mit, insbesondere in Azure Data Factory und Azure Databricks.
- Entwicklungskompetenz: Du hast mehrjahrige Erfahrung mit Python, Scala, SQL, Spark und Databricks in cloud-nativen Projekten.
- Pipeline-Know-how: Du hast nachweislich Erfahrung im Management von Datenextraktionspipelines.
- Analytisches Denken: Du arbeitest strukturiert, denkst analytisch und organisierst komplexe Aufgaben souveran.
- Kommunikation: Du kommunizierst klar, erstellst uberzeugende Konzepte und sprichst fliessend Deutsch und Englisch
