Senior Data Engineer

ACONEXT

Fellbach, Germany

5 days ago

Apply on jobs.meinestadt.de

Prepare application

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Experience level

Expert

Working hours

Regular working hours

Languages

English, German

Job source

jobs.meinestadt.de

Tech stack

Airflow Amazon Web Services Amazon S3 Microsoft Azure Cloud Computing Continuous Integration Information Engineering Extract Transform Load (ETL) Data Warehousing Relational Databases DevOps SQL Azure

+12 more

Scrum Methodology Power BI Scala (Programming Language) SQL Databases Data Streaming Azure Service Bus Apache Spark Gitlab Microsoft Fabric Data Lakes Information Technology Apache Kafka

Job description

Scala SQL Azure Cloud Testdurchführung Informatik AWS Englisch SCRUM Optimierung MS Power BI Data Warehouse GitLab Continuous Integration DevOps ETL Engineering Deutsch Verantwortungsvolle Arbeitsweise Flexibilität, * Entwicklung, Aufbau und Betrieb skalierbarer Datenpipelines (ETL/ELT) für Batch- und Streaming-Daten

End-to-End-Umsetzung von Datenprodukten: Ingestion, Transformation, Testing, Deployment und Monitoring
Verarbeitung und Modellierung von Daten in Cloud-Umgebungen (Azure / AWS, Microsoft Fabric)
Implementierung und Optimierung von Streaming-Lösungen (Kafka / Event Hubs)
Sicherstellung von Datenqualität, Performance, Skalierbarkeit und DSGVO-konformer Anonymisierung
Orchestrierung von Workflows mit Airflow sowie CI/CD-Integration
Verantwortung im produktiven Betrieb inkl. Monitoring und Troubleshooting
Zusammenarbeit mit Business- und IT-Stakeholdern in einem agilen DevOps-Umfeld

Requirements

Abgeschlossenes Studium in Informatik, Mathematik oder vergleichbare Qualifikation
Mehrjährige Erfahrung im Data Engineering mit Cloud-Fokus
Sehr gute SQL-Kenntnisse sowie Erfahrung mit relationalen Datenbanken und Data Warehousing
Fundierte Praxis mit Spark (Scala) und Delta Lake
Erfahrung mit Kafka / Event Hubs (Streaming) und Airflow (Orchestrierung)
Kenntnisse in Azure (z. B. ADLS, Fabric) und/oder AWS (z. B. S3, EMR, Lambda)
Erfahrung in der Bereitstellung von Datenmodellen/Datasets für Power BI
Erfahrung im SCRUM-/DevOps-Umfeld sowie mit CI/CD (z. B. GitLab)
Sehr gute Deutsch- und Englischkenntnisse in Wort und Schrift ACONEXT BIETET DIR