Lead Data Engineer - infas 360

Ipsos GmbH
Bonn, Germany
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
English, German
Experience level
Senior

Job location

Bonn, Germany

Tech stack

Geographic Information Systems
Airflow
Google BigQuery
Cloud Computing
Databases
Continuous Integration
Data Architecture
Information Engineering
Data Infrastructure
Data Integrity
ETL
Github
Python
PostgreSQL
NumPy
PostGIS
DataOps
SQL Databases
Google Cloud Platform
Cloud Platform System
Infrastructure as Code (IaC)
Gitlab
GIT
Pandas
Pytest
PySpark
Information Technology
Data Management

Job description

  • Du entwirfst eine nachhaltige Datenarchitektur und setzt eine performante sowie stabile Dateninfrastruktur auf der Google Cloud Platform um, um unsere Datenoperationen zu skalieren.
  • Du migrierst die derzeitige On-Premise-Lösung auf Basis von PostgreSQL in eine Cloud-Lösung auf Basis von BigQuery.
  • Du entwirfst, implementierst und optimierst Datenpipelines für den Umgang mit einer Vielzahl strukturierter und unstrukturierter Datenquellen.
  • Du stellst die Datenverfügbarkeit und -qualität sicher, indem du Best Practices in den Bereichen Datenmodellierung und Datenmanagement anwendest.
  • Du entwickelst automatisierte DataOps-Lösungen zur Gewährleistung von Datenintegrität und -transparenz, inklusive Monitoring und Fehlerbehebung.
  • Du konfigurierst, implementierst und verwaltest Airflow zur Orchestrierung von Workflows sowie DataKitchen für die Implementierung von Tests und Alerts.
  • Du nutzt deine Expertise in Spatial SQL für die Verarbeitung und Analyse von Geo-, Sach- und Marktdaten.
  • Du arbeitest eng mit funktionsübergreifenden Teams zusammen, um Datenprodukte zu entwickeln, die auf die Geschäftsanforderungen zugeschnitten sind.

Requirements

  • Du verfügst über mindestens 5 Jahre Berufserfahrung im Bereich Data Engineering oder in einer ähnlichen Rolle.
  • Du hast tiefgreifende Kenntnisse im Umgang mit Datenbanken (SQL, PostgreSQL, OGC SQL/PostGIS, BigQuery) sowie in der Skalierung von Datenplattformen.
  • Du hast Erfahrung in der Arbeit mit ETL-/ELT-Prozessen und Datenintegrationswerkzeugen.
  • Du bringst umfangreiche Erfahrung in der Python-Entwicklung mit und beherrschst Bibliotheken wie Pandas, NumPy, PySpark, Pandera oder pytest.
  • Du hast praktische Erfahrung mit Cloud-Plattform-Diensten und Infrastructure as Code (IaC) zur Bereitstellung und Verwaltung von Datenlösungen - idealerweise mit der Google Cloud Platform.
  • Du hast praktische Erfahrung mit Automatisierungs- und Workflow-Orchestrierungstools wie Airflow und dbt sowie mit Data-Quality-Testing- und Data-Observability-Tools wie DataKitchen.
  • Du hast praktische Erfahrung mit VCS und CI/CD, z. B. mit Git, GitLab oder GitHub.
  • Du hast einen Bachelor- oder Masterabschluss in Informatik, Informationstechnologie oder einem verwandten Bereich.
  • Du arbeitest gerne im Team, gestaltest Themen aktiv mit und wartest nicht darauf, dass dir Aufgaben vorgegeben werden.
  • Du verfügst über hervorragende Problemlösungsfähigkeiten und kannst in einem kollaborativen, agilen Umfeld arbeiten.
  • Idealerweise hast du Projekterfahrung mit Geodaten und Geoinformationssystemen.
  • Du sprichst fließend Deutsch (C1) und Englisch.

Benefits & conditions

  • Bei uns kannst du mobil und flexibel arbeiten.
  • Arbeite mit spannenden Daten und state of the art Technologielösungen.
  • Wir bieten Dir umfassende Schulungen und die Möglichkeit, selbstständig in beratender und leitender Funktion im internationalen Umfeld eines attraktiven Wachstumsmarktes zu arbeiten.
  • Es erwartet Dich ein hochmotiviertes, ehrgeiziges und dynamisches Team, internationale Herausforderungen und außergewöhnlich spannende Projekte in einem globalen Umfeld.
  • Du wirst bei Deinen Aktivitäten vom gesamten Team unterstützt.
  • Wir leben eine professionelle Feedback-Kultur mit regelmäßigen objektiven Leistungsbeurteilungen und Raum für Wachstum.
  • Eine attraktive Vergütung wird durch Sozialleistungen wie betriebliche Altersvorsorge ergänzt.
  • Wir statten Dich mit modernster Technologie aus und bieten Du einen Arbeitsplatz, an dem Du Dich wohlfühlst - in unserem Büro in Bonn.
  • Wir arbeiten mit modernen Methoden und Werkzeugen für die Softwareentwicklung und Datenanalyse und experimentieren beständig mit Innovationen.

About the company

infas 360 berät Wirtschaft und Wissenschaft im Nutzen aller verfügbaren Daten und Analysen, um bessere strategische Entscheidungen zu treffen sowie operative Planungen und Maßnahmen zu optimieren. Basis der Beratung sind die Sammlung und Kombination aller verfügbaren Datenquellen, die fortlaufend aktualisiert und analytisch aufbereitet werden. Zudem verfügen wir mit easymap über eine der international führenden Anwendungen für Business Mapping. Die infas 360 hat sich als Teil der international agierenden Ipsos Gruppe als Full-Service-Anbieter darauf spezialisiert soziales Handeln, gesellschaftlich wie ökonomisch, in ihrer räumlichen und zeitlichen Dimension darstellbar zu machen. Das Location Data & Analytics Team der Infas 360, einem Ipsos-Unternehmen, entwickelt standardisierte und integrierte Geo-, Sach- und Markt-Datenprodukte und liefert individuelle Analysen für unsere Kunden. Unternehmen, Institute und Behörden nutzen unsere umfassenden und verlässlichen Datenprodukte für kritische Entscheidungen im Marketing, Vertrieb, Logistik, Bau- und Umweltplanung und für viele weitere Bereiche.

Apply for this position