AI & Data - Data Engineer - Remote

Westhouse Consulting GmbH

Garching bei Munchen, Germany

9 days ago

Apply on www.westhouse-group.com

Prepare application

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Working hours

Regular working hours

Job source

www.westhouse-group.com

Tech stack

Java (Programming Language) Big Data Cloud Computing Databases Oracle Exadata Python (Programming Language) Oracle (Applications) SQL Databases Data Streaming Teradata SQL Data Lakes Databricks

Job description

Großskalige DWH-Migrationen durchführen - Migration von Data Warehouses mit mehreren TB Daten nach BigQuery leiten und dokumentieren.
Teradata-Quellsysteme analysieren - Legacy-Umgebungen mit Teradata bewerten, Migrationspfade entwickeln und technische Risiken minimieren.
Cloud-Architektur entwerfen - GCP-basierte Big Data Architektur konzipieren und für großskalige Migrationen optimieren.
End-to-End-Migrationsstrategien umsetzen - Datenbanken, Data Lakes und Streaming-Prozesse in einer Gesamtstrategie zusammenführen.
SQL-Tuning durchführen - Komplexe Workloads analysieren und SQL-Abfragen für Performance und Skalierbarkeit optimieren.
Databricks und DataProc einsetzen - Datenverarbeitungspipelines entwickeln und Streaming-Initiativen technisch unterstützen.
Python-basierte Migrationstools entwickeln - Skripte und Automatisierungen für Datenkonvertierungen und Mapping erstellen.

Requirements

Cloud & Big Data Architektur: Umfassende Erfahrung als GCP Data Architect, insbesondere in der Leitung großskaliger Migrationen nach BigQuery.
Datenbank-Expertise: Tiefgehende Expertise in Legacy-Umgebungen, insbesondere Teradata (erforderlich). Erfahrung mit Oracle/Exadata ist bevorzugt.
Migrationsspezialisierung: Nachweisbare Erfahrung in Cloud-Datenbanken, Data Lakes und End-to-End-Migrationsstrategien.
Technisches Ökosystem: Hands-on-Erfahrung mit Databricks, DataProc sowie Unterstützung für Data Streaming SIG Initiativen.
Entwicklung & SQL: Sehr gute Kenntnisse in Java oder Python sowie fortgeschrittenes SQL-Tuning zur Optimierung komplexer Workloads.