Technical Expert Databricks

Landesbank Baden-Wuerttemberg
Sindelfingen, Germany
yesterday

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
German

Job location

Sindelfingen, Germany

Tech stack

Artificial Intelligence
Data analysis
Azure
Continuous Integration
Information Engineering
ETL
Data Structures
Data Warehousing
Python
Power BI
Azure
SQL Databases
Spark
Microsoft Fabric
Data Lake
PySpark
Information Technology
Data Lakehouse
Terraform
Databricks

Job description

  • Gestaltung der technischen Weiterentwicklung der Data Management & Analytics Plattform als Technical Expert Databricks und Schaffung der Grundlage für moderne Data-, Analytics-, BI- und KI-Anwendungsfälle in der LBBW
  • Entwicklung, Automatisierung und Verwaltung der Azure-Databricks-Infrastruktur mit Terraform inklusive Aufbau und Pflege der benötigten Netzwerke zur Bereitstellung einer skalierbaren, sicheren, stabilen und gut wartbaren Plattform
  • Gestaltung der Integration von Microsoft Fabric und Power BI in die Data Management & Analytics Plattform, insbesondere für Reporting-, Self-Service-BI- und Analytics-Szenarien
  • Implementierung von Best Practices für CI/CD-Pipelines in Azure DevOps sowie Erweiterung der Plattform um Schnittstellen, technische Komponenten, Features und 3rd-Party-Analytics-Werkzeuge
  • Gestaltung der Lakehouse-Architektur auf Basis von Delta Lake sowie Beratung der Nutzer bei der Modellierung robuster Bronze/Silver/Gold-Datenstrukturen und Data Pipelines (ETL/ELT) für Reporting, Analytics und KI-/ML-Anwendungen
  • Enge Zusammenarbeit mit Data Engineers, BI-Teams, Data Scientists und Fachbereichen zur Überführung fachlicher Anforderungen in effiziente technische Lösungen
  • Sicherstellung des stabilen produktiven Betriebs der Plattform inklusive Monitoring, Fehleranalyse, Automatisierung und kontinuierlicher Verbesserung

Requirements

  • Abgeschlossenes Studium der Informatik, (Wirtschafts-)Informatik, Medieninformatik oder einer vergleichbaren Fachrichtung
  • Praktische Erfahrung mit Databricks, in der Bereitstellung von Databricks als Plattform, mit ausgewiesener Expertise in diesem Umfeld
  • Mehrjährige Erfahrung in der Terraform-Entwicklung und in der Arbeit mit Azure DevOps sowie fundierte Kenntnisse in Unity Catalog und im Berechtigungsmanagement mit Microsoft Entra ID
  • Erfahrung in der technischen Bereitstellung von Microsoft Fabric und Power BI, insbesondere im Zusammenspiel mit Lakehouse-/Data-Warehouse-Architekturen, Berechtigungsmodellen, Deployment-Prozessen und produktionsnahen Reporting-Szenarien
  • Sehr gute konzeptionelle und architektonische Fähigkeiten sowie Erfahrung in der Implementierung von Data Lakehouse- und Medaillon-Architekturen und mit Delta Lake
  • Erfahrung im Plattformbetrieb/SRE, insbesondere in Monitoring, Incident- und Problem-Management
  • Sehr gute Kenntnisse in Python, Spark/PySpark und SQL sowie fundierte Erfahrung im verteilten Rechnen auf Databricks
  • Hohe Umsetzungskompetenz, ausgeprägte Teamorientierung sowie Freude an gemeinsamer Gestaltung
  • Sehr gute Deutschkenntnisse in Wort und Schrift

About the company

Die LBBW zählt zu den führenden Banken Deutschlands und ist ein innovatives Unternehmen im Finanzsektor. Neben traditionellen Bankdienstleistungen beschäftigen wir uns mit den Bereichen Digitalisierung, Nachhaltigkeit und internationale Märkte. Wir bieten ein Umfeld, das persönliche und berufliche Entwicklung fördert. Mit über 10.000 Mitarbeitenden gestalten wir die Zukunft der Finanzwelt - Gemeinsam #NeuesSchaffen Die Perspektiven und Möglichkeiten in der LBBW-IT sind vielfältig und umfassen alle Bereiche einer modern aufgestellten IT. In der Gruppe Data & Analytics Services verantworten wir die Entwicklung und den Betrieb unserer Plattformen und Services rund um die Themen Data, Data Management, Analytics/KI und Generative KI. Unsere Mission ist es den wertschöpfenden Einsatz von Daten in der LBBW zu ermöglichen. Hierfür bauen wir die Plattformen und Services der Zukunft.

Apply for this position