Data Engineer (AWS, Python, AWS Glue) 95% remote ID02896

Entwicklung von Datenpipelines zur Datenaufnahme und -verarbeitung mit AWS S3, Step Functions, Lambda, AWS Batch, sowie Implementierung von Data Governance- und Sicherheitsrichtlinien. Optimierung von Datenbanken und Datenverarbeitungsprozessen, Automatisierung von Datenprozessen, Entwicklung von Lösungen zur Skalierung von Dateninfrastrukturen.

Für ein Projekt im Transport und Logistik suchen wir einen Data Engineer (m/w/d) mit Erfahrung in AWS, Python und AWS Glue., * Fundierte Erfahrung im Aufbau von Datenpipelines auf AWS mit den Services S3, Step Functions, Lambda/Fargate, AWS Batch (ab 5 Jahre)

• Fundierte Erfahrung mit AWS Glue (ab 3 Jahre)
• Fundierte Erfahrung mit Datenformaten und Schema-Validierung: Parquet, CSV, JSON, YAML (ab 3 Jahre)
• Fundierte Erfahrungen in der Implementierung mit Python (ab 5 Jahre)
• Projekterfahrung in der Datenintegration aus heterogenen Quellen (mindestens 2 Referenzen)

Soll-Anforderungen

• AWS-Zertifizierung (AWS Certified Data Engineer oder Data Analytics Specialty)
• Batch-Verarbeitung großer Datenmengen (500 GB pro Lieferung) (mindestens 2 Referenzen)
• Fundierte Erfahrung in der Event-Driven-Datenverarbeitung: EventBridge, Step Functions (ab 3 Jahre)
• Fundierte Erfahrung in der Umsetzung von Infrastructure as Code mit AWS CDK (ab 1 Jahr)

Technologien & Methoden

AWS, Python, AWS Glue, S3, Step Functions, Lambda, AWS Batch, Parquet, CSV, JSON, YAML, EventBridge, AWS CDK

Herzliche Grüße Das Recruiting Team post@mund-consulting.de Bearbeitet 17.06.26