Senior Data Engineer
Hays
Hamburg, Germany
2 days ago
Role details
Contract type
Permanent contract Employment type
Full-time (> 32 hours) Working hours
Regular working hours Languages
German Experience level
SeniorJob location
Hamburg, Germany
Tech stack
Amazon Web Services (AWS)
Amazon Web Services (AWS)
Automation of Tests
Azure
Google BigQuery
Databases
ETL
Data Vault Modeling
IBM DB2
Pair Programming
Vault (Revision Control System)
SQL Databases
Google Cloud Platform
Cloud Platform System
Kafka
Terraform
Job description
- Entwicklung und Betrieb von ETL/ELT-Pipelines mit Dataform und SQL
- Implementierung von Data Vault 2.0 (Raw & Business Vault)
- Aufbau von Bereitstellungsschichten (Data Marts, Star-Schemata)
- Sicherstellung der Datenqualität und automatisierte Tests
- Coaching & Wissenstransfer: Mentoring des internen Teams, Pair-Programming und Dokumentation
- Cloud-Plattform: Google Cloud Platform (GCP)
- Datenbank: BigQuery
- Transformation: Dataform (SQL-basiert)
- Ingestion: Kafka, Pub/Sub, S3, On-Premise DB2
- Orchestrierung & Infrastruktur: Terraform (IaC), Google Cloud Workflows
Requirements
- Exzellente SQL-Kenntnisse für komplexe Datenverarbeitungslogik
- Erfahrung mit ETL/ELT-Pipelines auf einer Cloud-Plattform (GCP, AWS, Azure)
- Erfahrung mit Data Vault
- Erfahrung mit großen Datenmengen und Performance-Optimierung
- Erfahrung mit Terraform, Google Cloud Workflows
- Kenntnisse in dbt als Alternative zu Dataform
- Erfahrung in Coaching und Wissenstransfer
