Senior DataOps Engineer

Conrad Electronic SE
Hirschau, Germany
6 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Shift work
Languages
English, German
Experience level
Senior

Job location

Hirschau, Germany

Tech stack

Artificial Intelligence
Airflow
Automation of Tests
Google BigQuery
Cloud Computing
Continuous Integration
Directed Acyclic Graph (Directed Graphs)
Information Engineering
ETL
Data Warehousing
DevOps
Python
Raw Data
DataOps
Software Engineering
SQL Databases
Data Logging
Model-Driven Development
Snowflake
Infrastructure as Code (IaC)
Terraform
Software Version Control
Redshift

Job description

Als zuverlässiger Partner machen wir die Beschaffung von technischem Bedarf für unsere Kund*innen so einfach und effizient wie möglich. Dafür arbeiten wir täglich mit Leidenschaft und Einfallsreichtum. Wir bieten ein hochwertiges Sortiment mit Millionen von technischen Produkten, kundenzentrierte Lösungen und Services sowie fachkompetente Betreuung von Mensch zu Mensch. Diese Mission treiben wir mit Leidenschaft voran, sehen Veränderung als Chance und liefern unseren Kunden alles, was ihre Projekte zum Erfolg führt. Als Familienunternehmen legen wir größten Wert auf nachhaltiges Wirtschaften und langfristige Beziehungen. Wir stehen für Qualität und Zuverlässigkeit., * Datenzuverlässigkeit garantieren: Du verantwortest die DataOps-Implementierung und CI/CD, um sicherzustellen, dass alle Produktions-Datenpipelines zuverlässig, nachverfolgbar und skalierbar für KI-Initiativen sind.

  • Daten-Geschwindigkeit optimieren: Du konzipierst hochperformante Airflow- und Plattformlösungen, die die Datenbereitstellung und die Time-to-Value für Automatisierungsprojekte drastisch beschleunigen.
  • Datenvertrauen aufbauen: Du treibst Qualitäts- und Governance-Standards mithilfe von dbt voran und wandelst Rohdaten in vertrauenswürdige, dokumentierte Assets um, die für robuste ML-Anwendungen entscheidend sind.
  • Orchestrierung & Zuverlässigkeit: Du konzipierst, implementierst und überwachst Produktions-ETL/ELT-Pipelines mithilfe von Apache Airflow (DAGs, benutzerdefinierte Operatoren). Du implementierst fortgeschrittenes Monitoring, Logging und Fehlerbehebung, um die Stabilität der Pipelines und die Aktualität der Daten für die KI-Plattform zu garantieren.
  • DataOps & CI/CD: Du wendest DataOps- und DevOps-Prinzipien (CI/CD, Versionskontrolle, automatisierte Tests) über den gesamten Datenentwicklungszyklus hinweg an. Du setzt rigorose Code-Qualitätsstandards für die gesamte Transformationslogik (SQL/Python) durch.
  • Infrastruktur & Performance: Du verwaltest und skalierst zentrale Datenkomponenten (Data Warehouse, Airflow) mithilfe von Infrastructure as Code (IaC). Du optimierst proaktiv die Performance der KI- und Datenplattform (Query Tuning, Partitionierung), um KI-Inferenzen mit geringer Latenz zu unterstützen und behebst kritische Produktionsprobleme.
  • Dokumentation: Du pflegst klare und umfassende Dokumentationen für Datenpipelines und die Architektur.

Requirements

  • Du bringst über 3 Jahre Erfahrung in einer DataOps- oder einer eng verwandten Data-Engineer-Rolle mit.

  • Du verfügst über Expertise in Apache Airflow (komplexe DAGs, benutzerdefinierte Operatoren, Produktionsmanagement).

  • Du hast tiefgehende praktische Erfahrung mit dbt (Modellentwicklung, Datenqualitäts-Tests, Paketmanagement).

  • Du besitzt Expertenkenntnisse in SQL und tiefgreifende Erfahrung mit Daten-Services der öffentlichen Cloud (GCP bevorzugt), wie z. B. BigQuery, Snowflake oder Redshift.

  • Du hast starke Python-Kenntnisse für die ETL/Airflow-Entwicklung.

  • Du hast Erfahrung mit Infrastructure-as-Code (IaC)-Tools wie Terraform. Software-Prinzipien: Du verfügst über praktisches Wissen über Software-Engineering-Prinzipien (Testing, CI/CD).

  • Du zeichnest Dich durch ausgezeichnete Kooperations- und Analysefähigkeiten aus.

  • Deutschkenntnisse sind ein Plus, fließendes Englisch ist notwendig.

About the company

Conrad bietet dir durch eine offene und empathische Arbeitsumgebung die optimale Möglichkeit, aktiv an der Zukunft des Unternehmens mitzuwirken und dich dabei selbst weiterzuentwickeln. Für diese einzigartige Unternehmenskultur wurden wir vom Institut Great Place to Work ausgezeichnet. Zeit fürs Leben Durch flexible Arbeitszeitmodelle, hybrides Arbeiten und Sonderurlaub hast du die Möglichkeit, deinen Arbeitsalltag individuell nach deinen Bedürfnissen zu gestalten. Auch dein Nachwuchs liegt uns am Herzen: An unserem Zentralstandort in Hirschau werden unsere "Conrad Kids" liebevoll in unserer betrieblichen Kindertagesstätte betreut. Kommunikation auf Augenhöhe Wir sind ein Familienunternehmen, deshalb ist uns ein familiärer Umgang besonders wichtig. Die Du-Kultur wird bei uns nicht nur kommuniziert, sondern ebenso wie die flachen Hierarchien tatsächlich gelebt. Wir l(i)eben gesund Deshalb bieten wir dir eine Vielzahl an Leistungen rund ums Thema Gesundheitsvorsorge. Besonders im Fokus stehen regelmäßige Gesundheitschecks und Vorsorgeuntersuchungen. Sportinteressierten bieten wir am Standort Hirschau zusätzlich die Möglichkeit, sich in unserem Conrad Sportverein bei diversen Sportarten, Kursen oder auf unseren firmeninternen Tennisplätzen auszupowern. Zu einem gesunden Lebensstil gehört natürlich auch eine ausgewogene Ernährung. Deshalb legen wir in unseren Kantinen (Hirschau/Wernberg) besonders großen Wert auf Regionalität und frisch zubereitete Mahlzeiten. Bei Conrad Electronic fördern wir aktiv die Vielfalt und Gleichstellung aller Mitarbeitenden. Unsere Stellen stehen allen qualifizierten Bewerbenden offen, ungeachtet ihres Geschlechts, ihrer Nationalität, ethnischen oder sozialen Herkunft, Religion oder Weltanschauung, einer Behinderung, ihres Alters oder ihrer sexuellen Identität.

Apply for this position