> Markdown version of [/jobs/ext/133806-senior-data-engineer-google-cloud-platform](https://www.wearedevelopers.com/jobs/ext/133806-senior-data-engineer-google-cloud-platform). Every page supports `.md` or `Accept: text/markdown`. Links point to the HTML versions so they work for humans too. Agent guide: [/agents.md](https://www.wearedevelopers.com/agents.md). --- # Senior Data Engineer - Google Cloud Platform - **Company:** Schwarz Unternehmenskommunikation GmbH & Co. KG - **Location:** Berlin, Germany - **Experience:** Expert - **Contract:** Permanent contract - **Skills:** Agile Methodology, Artificial Intelligence, Airflow, Data Analysis, Automation of Tests, Big Data, Cloud Computing, Cyber Security, Continuous Integration, Information Engineering, DevOps, Python (Programming Language), Machine Learning, Software Engineering, Data Streaming, Data Processing, Google Cloud, Apache Spark, Git, Containerization, Kubernetes, Information Technology, Real Time Data, Apache Kafka, Data Lakehouse, Software Version Control, Docker - **Published:** May 14, 2026 - **Apply:** https://computerjobs.com/de/en/mob/job/FE112716F70275B96F ## About the Role * Erfahrung: Mehrjahrige fundierte Erfahrung im Data Engineering, Big Data Umfeld oder Software Engineering, idealerweise in einer Senior-Rolle. * Cloud- & Streaming-Expertise: Du bringst fundierte Kenntnisse in Cloud-Infrastrukturen mit (Google Cloud Platform) sowie tiefe Erfahrung in der Verarbeitung von Echtzeitdaten mit Apache Kafka. * Tech-Stack: Sehr gute Kenntnisse in Python und Spark. Du bist sicher im Umgang mit Containerisierung (Kubernetes/Docker). * Orchestrierung & Transformation: Erfahrung mit Tools wie Apache Airflow und Transformationen via dbt ist von grossem Vorteil. * Software Best Practices: Du bist sicher im Umgang mit dem Softwareentwicklungszyklus, Versionsverwaltung (Git) sowie DevOps-Prinzipien und automatisierten Tests. * Konzeptionelle Starke: Du begeisterst dich fur moderne Architektur-Konzepte wie Data Lakehouses und Data Mesh und hast Freude daran, technologische Standards aktiv mitzugestalten. * Personlichkeit: Analytisches Denkvermogen, ein agiles Mindset sowie eine eigenverantwortliche und losungsorientierte Arbeitsweise. * Sprachen: Sehr gute Englischkenntnisse; Deutschkenntnisse sind bevorzugt. ## Description * Erfahrung: Mehrjahrige fundierte Erfahrung im Data Engineering, Big Data Umfeld oder Software Engineering, idealerweise in einer Senior-Rolle. * Cloud- & Streaming-Expertise: Du bringst fundierte Kenntnisse in Cloud-Infrastrukturen mit (Google Cloud Platform) sowie tiefe Erfahrung in der Verarbeitung von Echtzeitdaten mit Apache Kafka. * Tech-Stack: Sehr gute Kenntnisse in Python und Spark. Du bist sicher im Umgang mit Containerisierung (Kubernetes/Docker). * Orchestrierung & Transformation: Erfahrung mit Tools wie Apache Airflow und Transformationen via dbt ist von grossem Vorteil. * Software Best Practices: Du bist sicher im Umgang mit dem Softwareentwicklungszyklus, Versionsverwaltung (Git) sowie DevOps-Prinzipien und automatisierten Tests. * Konzeptionelle Starke: Du begeisterst dich fur moderne Architektur-Konzepte wie Data Lakehouses und Data Mesh und hast Freude daran, technologische Standards aktiv mitzugestalten. * Personlichkeit: Analytisches Denkvermogen, ein agiles Mindset sowie eine eigenverantwortliche und losungsorientierte Arbeitsweise. * Sprachen: Sehr gute Englischkenntnisse; Deutschkenntnisse sind bevorzugt. Einleitungstext Schwarz Digits schafft das technologische Fundament fur digitale Entscheidungsfreiheit in Europa. Als IT- und Digitalsparte der Schwarz Gruppe entwickeln und verantworten wir einerseits die IT-Infrastrukturen fur die Handelssparten Lidl und Kaufland sowie die Schwarz Produktion und PreZero. Gleichzeitig agieren wir als unabhangiger Anbieter am externen Markt, um Unternehmen in ganz Europa bei ihrer digitalen Transformation zu unterstutzen. Unsere Kernleistungen bundeln wir in den Bereichen Cloud, Cyber Security, Data & AI, Communication und Workspace. Trage auch du zur digitalen Entscheidungsfreiheit in Europa bei. Bei uns arbeitest du an der Schnittstelle zwischen Agilitat und Sicherheit: Du profitierst von den schnellen Entscheidungswegen, geniesst echte Gestaltungsspielraume in deinen Projekten und baust dabei auf das stabile Fundament der Schwarz Gruppe. Deine Aufgaben * Data Product Engineering: Du konzipierst, entwickelst und betreibst hochperformante Batch- und Streaming-Datenflusse in unserem zentralen Google Cloud Data Lakehouse fur Analytics- und Machine-Learning-Anwendungsfalle. * Architektur & Skalierung: Du optimierst die Cloud-Architektur (GCP), stellst die Skalierbarkeit unserer Losungen sicher und entwickelst unsere Standards fur die Datenverarbeitung in Echtzeit und Batch weiter. * Software Excellence: Du wendest moderne Software-Engineering-Methoden an und setzt neue Massstabe fur CI/CD, automatisiertes Testing und Deployment-Prozesse in der Datenorganisation. * Framework-Mitgestaltung: Du unterstutzt die Weiterentwicklung unserer zentralen Orchestrierungs-Tools (auf Basis von Airflow und dbt), um die Effizienz und Qualitat der Datenbereitstellung unternehmensweit zu steigern. * Datenqualitat & Governance: Du implementierst automatisierte Validierungsprozesse (z. B. fur Streaming-Events) und stellst die Einhaltung von Sicherheits- und Datenschutzstandards sicher. * Agile Kollaboration: Du arbeitest in interdisziplinaren Teams eng mit Product Ownern, Data Scientists und Fachbereichen zusammen, um komplexe Business-Anforderungen in technische Losungen zu ubersetzen. ## Related Videos - [How a Small Team Shrank a Microsoft Monorepo by 94%](https://www.wearedevelopers.com/videos/1236-how-a-small-team-shrank-a-microsoft-monorepo-by-94) - [Docker Compose: Rediscovered](https://www.wearedevelopers.com/videos/1978-docker-compose-rediscovered) - [From DevOps to Scaled DevOps: How We’re Rebuilding Continuous Delivery as a Platform](https://www.wearedevelopers.com/videos/100018-from-devops-to-scaled-devops-how-we-re-rebuilding-continuous-delivery-as-a-platform) - [From Messy Queries to Scalable Systems - How Data Engineering actually works](https://www.wearedevelopers.com/videos/100203-from-messy-queries-to-scalable-systems-how-data-engineering-actually-works) - [Git for Code Reviews](https://www.wearedevelopers.com/videos/429-git-for-code-reviews) - [Modern Data Architectures need Software Engineering](https://www.wearedevelopers.com/videos/1030-modern-data-architectures-need-software-engineering) ## Related Articles - [Data Analyst Salary Germany](https://www.wearedevelopers.com/magazine/277-data-analyst-salary-germany) - [The Biggest German Tech Companies](https://www.wearedevelopers.com/magazine/424-the-biggest-german-tech-companies) - [Backend Developer Salary in Germany [2023]](https://www.wearedevelopers.com/magazine/196-backend-developer-salary-in-germany-2023) - [Fullstack developer salary in Germany [2023]](https://www.wearedevelopers.com/magazine/197-fullstack-developer-salary-in-germany-2023) - [Best Coding Boot Camps in Germany](https://www.wearedevelopers.com/magazine/237-best-coding-boot-camps-in-germany) - [Finding Jobs in Germany](https://www.wearedevelopers.com/magazine/375-finding-jobs-in-germany)