Senior Data Engineer

Schmitt GmbH
Municipality of Valencia, Spain
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Shift work
Languages
German
Experience level
Senior

Job location

Remote
Frankfurt am Main, Germany

Tech stack

Airflow
Amazon Web Services (AWS)
Amazon Web Services (AWS)
Azure
Data Warehousing
DevOps
MySQL
Scrum
Power BI
Scala
Scaled Agile Framework
SQL Databases
Data Streaming
Enterprise Software Applications
Spark
Microsoft Fabric
Data Lake
Gitlab-ci
Information Technology
Star Schema
Kafka

Job description

Als mittelständisches Unternehmen und verlässlicher Partner der Industrie liefert Schmitt Engineering umfassende technische Expertise. Unsere Tätigkeiten erstrecken sich entlang der Prozesskette von der Planung und Projektierung über die Entwicklung und Konstruktion bis hin zur Fertigung, Montage und Inbetriebnahme., * Entwicklung, Betrieb und Optimierung von Datenprodukten und Batch-/Streaming-Pipelines in Microsoft Fabric Lakehouses (SQL, Spark/Scala, Delta Lake; Kafka/Event Hubs, ADLS/S3)

  • End-to-End-Verantwortung für Datenprodukte: Ingestion, Transformation, Tests, Deployment, Scheduling, Monitoring und Workflow-Orchestrierung (Airflow)
  • Identifikation und Umsetzung von Optimierungspotenzialen (Time-to-Market, Betriebskosten, Performance)
  • Entwicklung von Data-Warehousing-Artefakten (MySQL) inkl. grundlegender Modellierung (z.B. Star Schema)
  • Sicherstellung von Datenqualität, Anonymisierung und DSGVO-Konformität
  • Bereitstellung analysierbarer Datasets für Power BI
  • Mitarbeit im agilen DevOps-Team (Scrum/SAFe) inkl. Dokumentation sowie fachlicher Betrieb (Troubleshooting, CVEs, Nachprozessierung, Stakeholder-Kommunikation)

Requirements

  • Abgeschlossenes Studium im Bereich Informatik, Wirtschaftsinformatik, Data Science oder eine vergleichbare Qualifikation mit starkem IT- und Datenbezug sowie einschlägige Berufserfahrung
  • Erfahrung mit Microsoft Fabric/Azure, Power-BI-Datenbereitstellung sowie MySQL und DWH-Grundlagen
  • Erfahrung im Anwendungsbetrieb, agilen SCRUM-Teams und mit GitLab CI/CD (Build, Test, Deploy, Reviews)
  • Sehr gute SQL-Kenntnisse sowie Erfahrung mit Spark (Scala), Delta Lake, Kafka/Event Hubs und Airflow
  • Know-how in Batch- und Streaming-Architekturen, Performance-Optimierung, Datenqualität und DSGVO
  • Optional: AWS (S3, EMR, Lambda), Migrationen Richtung Fabric, IaC-Grundlagen
  • Sehr gute Deutschkenntnisse (C1/C2) in Wort und Schrift

Note: Please be aware that German is the working language in our project and good German language skills (level B2+) are a prerequisite for the position.

Benefits & conditions

  • Über 30 Jahre Know-how und abwechslungsreiche Projekte
  • Namhafte Kunden in Hochtechnologiebranchen
  • Unbefristeter Arbeitsvertrag
  • Attraktive, übertarifliche Vergütungsstruktur
  • 30 Tage Urlaub
  • Flexible Arbeitszeitmodelle und Homeoffice
  • Mitarbeiterevents
  • Gesundheitsleistungen
  • Mitarbeiter werben Mitarbeiter

About the company

Die Schmitt GmbH ist ein mittelständisches Unternehmen mit Standorten in Erlangen und Regensburg.

Mit langjähriger Engineering Kompetenz in unterschiedlichen Branchen sind wir Partner der Industrie. Wir unterstützen unsere Kunden entlang der Prozesskette von der Konzeption, Planung und Projektierung über die Entwicklung und Konstruktion bis hin zur Fertigung, Montage und Inbetriebnahme.

Apply for this position