Data Engineer - Data Exchange & Automation Hub

Jobriver Hr Service
Köln, Germany
2 months ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Expert
Experience required
5 years minimum
Compensation
€70,000.0 - €90,000.0
Working hours
Regular working hours
Languages
English, German
Job source

Tech stack

Amazon Web Services Amazon S3 Data Analysis Microsoft Azure Cloud Computing Continuous Integration Information Engineering Github Python (Programming Language) Software Engineering SQL Databases Google Cloud
+5 more
Cloud Platform System Apache Spark Data Lakes Bicep Terraform

Job description

  • Full-timeEmployment type: Full-time
  • €51,000 - €75,500 (XING estimate)
  • On-site
  • Be an early applicant

Requirements

Der ideale Kandidat hat ein erfolgreich abgeschlossenes Studium im MINT-Bereich oder eine vergleichbare Qualifikation sowie mindestens 5 Jahre Berufserfahrung im Bereich Data Engineering oder in einem vergleichbaren Bereich. Sie verfügen über Erfahrung im Aufbau skalierbarer Datenpipelines mit Technologien wie Spark, SQL oder ähnlichen. Ein fundiertes Verständnis von Data Lakes, Lakehouse-Architekturen und Distributed Processing ist ebenfalls erforderlich. Zudem haben Sie Erfahrung in der Implementierung von CI/CD-Prozessen mit Tools wie Azure DevOps oder GitHub Actions in Verbindung mit Terraform, Bicep oder vergleichbaren Technologien. Kenntnisse in Cloud-Plattformen wie Azure, AWS oder GCP sowie in Speicherdiensten wie ADLS oder S3 sind von Vorteil. Sie sollten auch Erfahrung im Design und in der Orchestrierung automatisierter Daten-Workflows und in der Softwareentwicklung mit Python oder einer vergleichbaren Programmiersprache mitbringen. Eine strukturierte, selbstständige, team- und lösungsorientierte Arbeitsweise sowie fließende Deutsch- und Englischkenntnisse sind unerlässlich. Zertifizierungen in den Bereichen Cloud, Data oder Analytics sind von Vorteil.

Technologien

Python Azure Terraform

Soft Skills

Teamfähigkeit Kommunikation Analytisches Denken

Erforderliche Sprachen

Deutsch Englisch

Benefits & conditions

Hybrid Vollzeit Senior vor 6 Tagen 70.000 € - 90.000 € / Jahr

About the company

Unser Kunde ist ein führender Lebensmitteleinzelhändler mit einer langen Tradition und einer Mission, qualitativ hochwertige Produkte zu niedrigen Preisen anzubieten. In der Rolle des Data Engineers sind Sie verantwortlich für das Design und die Entwicklung technischer Lösungen sowie Richtlinien und Prozesse für eine internationale Data Analytics Plattform auf Azure. Zu Ihren täglichen Aufgaben gehört der Aufbau und die Wartung von CI/CD-Pipelines für Daten-Workflows und Plattformkomponenten mithilfe von Azure DevOps. Sie führen robuste Tests, Validierungen und Qualitätssicherungsmaßnahmen durch und sind an der kontinuierlichen Weiterentwicklung der Datenplattform beteiligt. Dabei entwickeln Sie nützliche Komponenten, erweitern Automatisierungen und implementieren Infrastructure-as-Code. Ein weiterer wichtiger Aspekt Ihrer Rolle ist die Sicherstellung eines stabilen Betriebs der entwickelten Lösungen durch proaktives Monitoring und effektives Debugging. Sie evaluieren neue Tools und Features und führen Proof-of-Concepts durch. In einem agilen Scrum-Umfeld arbeiten Sie eng mit anderen Data Engineers zusammen, unterstützen und mentorieren diese. Ihr Arbeitsumfeld ist modern und bietet Ihnen die Möglichkeit, Ihre Fähigkeiten in einem dynamischen Team weiterzuentwickeln.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on xing.com

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

3:14 min

Structuring career paths and localized data architectures

Ulrich Wurstbauer +1 · LIVE

1:34 min

Essential commands for running and testing Terraform configurations

Hennie Francis · LIVE

6:36 min

Funding open source through GitHub Accelerator and Sponsors

Stormy Peters · WWC 2023

2:56 min

Provisioning a secure container infrastructure with Bicep

Matthias Falkenberg +1 · WWC 2022

2:32 min

Overview of Terraform and Terraform Cloud features

Devlin Duldulao · LIVE

2:40 min

Using GitHub primitives for internal documentation and corporate operations

Kyle Daigle · Coffee With Developers

Videos

See all

Related articles

See all