> Markdown version of [/jobs/ext/3118356-intermediate-data-engineer](https://www.wearedevelopers.com/jobs/ext/3118356-intermediate-data-engineer). Every page supports `.md` or `Accept: text/markdown`. Links point to the HTML versions so they work for humans too. Agent guide: [/agents.md](https://www.wearedevelopers.com/agents.md).

---

# Intermediate Data Engineer

- **Company:** BCM Solutions GmbH
- **Location:** Stuttgart, Germany
- **Experience:** Experienced
- **Contract:** Permanent contract
- **Skills:** Clean Code Principles, Artificial Intelligence, Amazon Web Services, Data Analysis, Microsoft Azure, Cloud Computing, Continuous Integration, Information Engineering, Data Integrity, Data Warehousing, Relational Databases, Distributed Systems, Python (Programming Language), SQL Databases, Data Streaming, Management of Software Versions, Apache Spark, Git, Data Lakes, Information Technology, Data Lineage, Star Schema, Machine Learning Operations, Docker, Databricks
- **Published:** September 28, 2026
- **Apply:** https://www.arbeitsagentur.de/jobsuche/jobdetail/10001-1003252000-S

## About the Role

Data Engineering: Erste praktische Erfahrung mit Distributed Computing (z. B. Spark/Databricks oder vergleichbare Technologien) und dem Aufbau von Daten-Pipelines.

 - Programmierung: Gute Kenntnisse in Python sowie ein sicherer Umgang mit relationalen Datenbanken (SQL).
 - Cloud-Basis: Grundverständnis von Cloud-Technologien (Azure oder AWS) und ersten Kontakt zu Docker.
 - Versionierung: Sicherer Umgang mit Git und Verständnis für Data Lineage Konzepte.

Sehr gute Kenntnisse

 - CI/CD-Grundlagen: Grundverständnis von automatisierten Workflows und Deployments.
 - Datenmodellierung: Wissen über Partitionierung und grundlegende Architekturprinzipien von Data Lakes.
 - Datenmodellierung: Grundverständnis für dimensionale Datenmodellierung (Star/Snowflake Schema) und Architekturprinzipien von Data Lakes.
 - Qualitätsanspruch: Erfahrung mit Testing-Verfahren für Datenprozesse und Clean Code Standards.

Persönlich

 - Lernbereitschaft: Du hast eine hohe Motivation, Dich in die rasant entwickelnde Data- und AI-Landschaft einzuarbeiten.
 - Team-Spirit: Du arbeitest gerne kooperativ mit Engineering- und Analytics-Teams zusammen.
 - Strukturierte Arbeitsweise: Du gehst Aufgaben methodisch an und hast ein Auge für Datenintegrität.
 - Sehr gute Deutsch- und Englischkenntnisse sowie ein abgeschlossenes Studium im Bereich Informatik, Data Engineering oder vergleichbar.

## Description

Pipeline-Entwicklung: Du entwickelst und wartest automatisierte Data-Ingestion-Pipelines und stellst die zuverlässige Verarbeitung von Batch- und Streaming-Daten sicher.

️ Mitarbeit an der Plattform: Du unterstützt beim Ausbau moderner, hybrider Datenplattformen (z. B. auf Basis von Spark/Databricks oder vergleichbaren Technologien) und implementierst Features für moderne Datenarchitekturen (Lakehouse & DWH).

️ Data Quality: Du setzt Schema-Validierungen und Datenqualitätsprüfungen während des Ingestion-Prozesses um und unterstützt bei der Metadatenextraktion.

️ Governance-Support: Du arbeitest an der Umsetzung von Zugriffskontrollen und Datenversionierungen mit, um die Reproduzierbarkeit von Datensätzen zu gewährleisten.

Performance-Support: Du unterstützt bei der Optimierung von Datenverarbeitungsprozessen und hilfst dabei, unnötige Datenbewegungen im System zu minimieren.

Wachstum: In Zusammenarbeit mit unseren Seniors vertiefst Du Dein Wissen in verteilten Systemen, MLOps-Tooling und modernen Lakehouse-Designs.


## Related Videos

- [From Messy Queries to Scalable Systems - How Data Engineering actually works](https://www.wearedevelopers.com/videos/100203-from-messy-queries-to-scalable-systems-how-data-engineering-actually-works)
- [Cutting LLM Costs Without Cutting Quality: How to Beat Proprietary LLMs with Fine-Tuned Open Source](https://www.wearedevelopers.com/videos/100151-cutting-llm-costs-without-cutting-quality-how-to-beat-proprietary-llms-with-fine-tuned-open-source)
- [Docker Compose: Rediscovered](https://www.wearedevelopers.com/videos/1978-docker-compose-rediscovered)
- [How a Small Team Shrank a Microsoft Monorepo by 94%](https://www.wearedevelopers.com/videos/1236-how-a-small-team-shrank-a-microsoft-monorepo-by-94)
- [Modern Data Architectures need Software Engineering](https://www.wearedevelopers.com/videos/1030-modern-data-architectures-need-software-engineering)
- [OLTP in the Lakehouse: Redefining Data for AI Workloads](https://www.wearedevelopers.com/videos/2038-oltp-in-the-lakehouse-redefining-data-for-ai-workloads)

## Related Articles

- [Best Coding Boot Camps in Germany](https://www.wearedevelopers.com/magazine/237-best-coding-boot-camps-in-germany)
- [System change: restart as developer?](https://www.wearedevelopers.com/magazine/39-system-change-restart-as-developer)
- [The Most Popular IT Jobs on the Market](https://www.wearedevelopers.com/magazine/376-the-most-popular-it-jobs-on-the-market)
- [The Biggest German Tech Companies](https://www.wearedevelopers.com/magazine/424-the-biggest-german-tech-companies)
- [Data Analyst Salary Germany](https://www.wearedevelopers.com/magazine/277-data-analyst-salary-germany)
- [Top-Paying Tech Jobs (with Salaries)](https://www.wearedevelopers.com/magazine/372-top-paying-tech-jobs-with-salaries)