Senior Data Engineer

softwareXperts GmbH

Frankfurt am Main, Austria

3 days ago

Apply on www.sw-xperts.com

Prepare application

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Experience level

Expert

Working hours

Regular working hours

Job source

www.sw-xperts.com

Tech stack

Application Programming Interfaces (APIs) Data Analysis JIRA Microsoft Azure Profiling Data Integration Data Structures Scrum Methodology Power BI Pyspark Terraform Databricks

Job description

Für unseren Kunden im Bereich IT-Dienstleistungen suchen wir einen/eine erfahrene/n Senior Data Engineer. Wien Vollzeit ab sofort

2-4 Tage / Monat (nicht wöchentlich fix)

Remote / vor Ort Anteil: überwiegend remote, Onsite-Teilnahme an wichtigen Terminen/Meetings muss gewährleistet sein

Must haves

Databricks (Azure-Umfeld) - tiefgehende Expertise erforderlich und * Azure DevOps
PySpark, Terraform und Power BI
Nutzung des DQX-Frameworks, sowie Jira, * Implementierung von Datenintegrationen auf Basis vorgegebener Schnittstellenspezifikationen
Analyse von Daten (Data Profiling) sowie Umsetzung von Regeln zur Sicherstellung der Datenqualität (abhängig von DBX-/DQX-Frameworks)
Steuerung und Aktivierung von Datenflüssen aus Quellsystemen entsprechend dem definierten Datendesign der jeweiligen Datenprodukte
Bereitstellung von Datenservices in Form von Schnittstellen gemäß den festgelegten Datenstrukturen
Verwaltung von Versionen sowie Durchführung von Deployment- und Release-Prozessen für entwickelte Pipelines
Vorbereitung des Betriebs und Gewährleistung eines stabilen, reibungslosen laufenden Betriebs
Implementierung ergänzender technischer Datenqualitätsmaßnahmen zur Absicherung des operativen Betriebs
Mitwirkung bei der Integration und dem Aufbau von Power-BI-Datenmodellen sowie Reports und Dashboards

Requirements

Fundierte Praxis in der Arbeit mit Databricks, insbesondere im Azure-Umfeld, einschließlich PySpark
Erfahrung mit Power BI, insbesondere in der Erstellung von Reports und Dashboards, der Arbeit mit semantischen Modellen, DAX sowie Modellierungsschnittstellen
Kenntnisse in der Konzeption und Umsetzung von Datenmodellen
Ausgeprägte Kompetenz in der Implementierung von Datenqualitätsregeln unter Nutzung des DQX-Frameworks
Gutes Verständnis moderner Datenarchitekturen wie Lakehouse, Data Mesh und API-basierter Ansätze
Erfahrung in der technischen Realisierung von Integrationsschnittstellen
Routine im agilen Arbeiten nach Methoden wie Scrum, Kanban oder hybriden Ansätzen
Sicherer Umgang mit Jira zur Steuerung von Backlogs, Aufgaben und Projektfortschritten