Lead Data Engineer
Westhouse Consulting GmbH
Frankfurt am Main, Germany
2 days ago
Role details
Contract type
Temporary contract Employment type
Full-time (> 32 hours) Working hours
Regular working hours Languages
German Experience level
SeniorJob location
Frankfurt am Main, Germany
Tech stack
Agile Methodologies
Databases
Continuous Integration
Information Engineering
PostgreSQL
MongoDB
NoSQL
Scrum
Role-Based Access Control
Cloud Services
Prometheus
SQL Databases
Data Streaming
Data Logging
Fluentd
Grafana
Spark
Kubernetes
Information Technology
Kafka
Terraform
Job description
- Technische Leitung, Sicherstellung von Produktqualität und termingerechter Lieferung
- Etablierung von Best Practices, Code Reviews und einer Kultur technischer Exzellenz
- Technische Koordination mit Stakeholdern, Beseitigung von Hindernissen und Förderung kontinuierlicher Weiterbildung
- Planung realistischer Meilensteine, Bewertung von Machbarkeit, Risiken und Abhängigkeiten
- Unterstützung bei Aufwandsschätzungen, Backlog Refinement und transparenter Entscheidungsfindung
- Sicherstellung wertorientierter Lieferung im Einklang mit Geschäfts- und Kundenanforderungen
- Übersetzung der Produktvision in umsetzbare Schritte, frühzeitige Identifikation technischer Risiken
- Enge Zusammenarbeit mit Product Ownership, Architektur, Entwicklung, QA und Operations
- Monitoring des Lieferfortschritts und Entfernung von Blockern
- Konzeption & Deployment containerisierter Data Services (PostgreSQL, TimescaleDB, Kafka, MongoDB, Spark) auf Kubernetes
- Nutzung und Entwicklung von Kubernetes Operators zur Automatisierung des gesamten Lebenszyklus
- Optimierung von Performance, Zuverlässigkeit und Skalierbarkeit der Datenservices
- Aufbau von Observability (Logging, Metrics, Alerts) und CI/CD-basierten Deployments
- Design, Installation und Verwaltung von Kubernetes-Clustern mittels IaC (z. B. Terraform)
- Sicherstellung von Hochverfügbarkeit, Skalierbarkeit und Sicherheitsstandards
- Automatisierung von Betriebsabläufen für effizientes Lifecycle-Management
- Implementierung von RBAC, Pod Security Standards, Netzwerksegmentierung und Secrets Management
- Betrieb eines Service Mesh sowie Integration von Monitoring-Tools (Prometheus, Grafana, Fluentd)
Requirements
- ES MUSS JEDER SKILL MIT MINDESTENS EINEM PROJEKT BELEGT WERDEN!!!
- Über 5 Jahre allgemeine IT-Erfahrung sowie über 5 Jahre Führungserfahrung, belegt durch die erfolgreiche Umsetzung groß angelegter IT-Projekte
- Mehr als 3 Jahre Erfahrung im Bereich Data Services
- Umfassende Erfahrung in der Entwicklung und Wartung von SQL- und NoSQL-Datenbanken sowie Streaming-Lösungen
- Erfahrung mit agilen Methoden, z. B. Scrum und Kanban
- Nachgewiesene Erfahrung im Data Engineering mit Schwerpunkt auf der Gestaltung und Implementierung skalierbarer Datenarchitekturen
- Vertrautheit mit modernen Datentechnologien und Cloud-Services, belegt durch die Projekthistorie
