Senior Data Engineer - Schwerpunkt Databricks

Windhoff Group

Gescher, Germany

20 days ago

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Experience level

Expert

Working hours

Shift work

Languages

English, German

Job source

de.indeed.com

Tech stack

Unity 3d Artificial Intelligence Amazon Web Services Microsoft Azure Cloud Computing Data Architecture Extract Transform Load (ETL) Data Vault Modeling Data Warehousing Python (Programming Language) SQL Databases Data Streaming

+10 more

Azure Service Bus Google Cloud Software Distribution Snowflake Apache Spark Data Lakes Data Analytics Star Schema Apache Kafka Databricks

Job description

Du entwirfst skalierbare Lakehouse-Architekturen und entwickelst Datenplattformen, die zuverlässig, performant und wirtschaftlich nutzbar sind.
Du projektierst und realisierst Data-Engineering-Projekte auf der Databricks-Lakehouse-Plattform - von der Anforderungsaufnahme bis zum produktiven Betrieb, inklusive Tests und Übergabe in den Echtbetrieb.
Du konzipierst Datenmodelle und ETL-/ELT-Strecken mit Delta Lake, Medallion-Architektur, Delta Live Tables und Databricks Workflows - und bindest bei Bedarf ergänzende Technologien wie Snowflake, Azure, AWS oder Google Cloud an.
Du übersetzt fachliche Anforderungen von Kunden und Fachbereichen in nachhaltige Datenlösungen und bringst deine Erfahrung bei Architekturentscheidungen und der Weiterentwicklung bestehender Systeme ein.
Als Senior Consultant übernimmst du Verantwortung für dein (Teil-)Projekt und das Projektteam, unterstützt weniger erfahrene Kolleg:innen und treibst die Qualität unserer Lösungen kontinuierlich voran.
Du unterstützt Presales- und Marketingaktivitäten im Databricks-Kontext, z. B. mit Lösungsskizzen, Demos oder Fachbeiträgen., * Durchführung von Projekten entlang der D&A Wertschöpfungskette: Anforderungsaufnahme, Konzeption, Implementierung & Design, Test, Rollout & Hypercare
Enge Zusammenarbeit mit erfahrenen Architekten und Consultants in Projekten mit komplexer Datenlandschaft (heterogene Quellen, Legacy-Systeme)
Technische Weiterentwicklung und fachlicher Austausch auf hohem Niveau
Entwicklungsperspektiven in Richtung Data Architect oder Lead Consultant

Requirements

Mehrjährige Erfahrung im Bereich Data & Analytics sowie fundierte Projekterfahrung mit Databricks
Du beherrschst die zentralen Databricks-Bausteine (Delta Lake, Medallion-Pattern, Auto Loader, Delta Live Tables, Databricks Workflows, Databricks SQL, Unity Catalog) sowie Spark, Python und SQL.
Erfahrung mit Lakehouse- oder Data-Warehouse-Architekturen
Know-how in Datenmodellierung (z.B. Data Vault, Star Schema) sowie ETL-/ELT-Prozessen
Erfahrung im Cloud-Umfeld (Azure oder AWS) und mit Streaming-Technologien wie Kafka oder Event Hubs sowie Performance-Optimierung von Datenplattformen
Die Fähigkeit, fachliche Anforderungen zu analysieren und in nachhaltige technische Lösungen zu übersetzen
Verhandlungssichere (C-Niveau) Deutsch- und gute Englischkenntnisse runden dein Profil ab.

About the company

Wir stellen standortunabhängig ein. Du arbeitest überwiegend remote - von zuhause oder an einem unserer Standorte, wenn dieser für dich gut erreichbar ist. Für Kundentermine und Teamevents bist du etwa 1-2 Mal im Monat unterwegs, egal wo in Deutschland du wohnst.
130 Data & Analytics Consultants zum Austausch sowie eine interne Weiterbildungsacademy
Langfristige Projekte mit wechselnden technologischen Herausforderungen
Ein festes Budget für Weiterbildungsmöglichkeiten sowie persönliche und fachliche Entwicklungsperspektiven
Eine gute Work-Life-Balance durch flexible Arbeitszeiten, Überstundenausgleich sowie bis zu 40 Tagen Urlaub
Sowohl erstklassige Hard- und Softwareausstattung als auch Leasingangebote für Firmenwagen, IT-Hardware und Fahrräder
Kurze Wege im Unternehmen, ein fairer Umgang miteinander sowie unterhaltsame Teamevents