Senior Data Platform Engineer

Apsa
Vienna, Austria
4 days ago
Apply on europa.eu
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Expert
Compensation
€65,000
Working hours
Shift work
Job source

Tech stack

Amazon Web Services Big Data Cloud Computing Cloudera Impala Data Infrastructure Linux Memory Management Amazon DynamoDB Apache Hadoop Hadoop Distributed File System Python (Programming Language) Platform as a Service (PAAS)
+11 more
Cloudera Systems Architecture Apache Zookeeper Apache Yarn System Availability Apache Spark Kubernetes Apache Flink Apache Kafka Apache Nifi Terraform

Job description

  • Administration, Überwachung und Optimierung einer Big-Data-Plattform in der AWS-Cloud

  • Verwaltung und Wartung von Cloudera On-Cloud-PaaS-Diensten und AWS-nativen Technologien (z. B. Kafka, Flink, NiFi, Iceberg Tables, DynamoDB)

  • Bereitstellung und Automatisierung von Infrastruktur in AWS mit Terraform und ArgoCD

  • Durchführung von Updates, Upgrades und Incident-Management für Plattformkomponenten

  • Beratung von Entwickler:innen bei der Auswahl geeigneter Services für Geschäftsanwendungsfälle

  • Bereitstellung von 3rd-Level-Support, inklusive Fehleranalyse, Troubleshooting und Bereitschaftsdienst zur Gewährleistung der Systemverfügbarkeit

  • Optimierung von Workloads (z. B. Flink-Job-Speicherverwaltung, Impala/Trino-Abfragoptimierung)

  • Bewertung und Implementierung cloud-nativer Dienste im Einklang mit der Systemarchitektur

Requirements

  • Fundierte Linux- und Hadoop-Ökosystem-Kenntnisse (HDFS, Zookeeper, Yarn, Impala, Spark, Kafka)

  • Erfahrung mit Automatisierungstools wie Terraform

  • Programmierkenntnisse in Spark, Python und idealerweise Kenntnisse von Cloudera-Diensten (z. B. Hue, Knox, Ranger RAZ, Streams Messaging Manager, NiFi, Kudu)

  • Erfahrung mit Bereitschaftsdienst, Troubleshooting und Rolling Restarts sind von Vorteil

  • Kubernetes-Erfahrung ist ein großer Pluspunkt

  • Teamplayer-Mentalität

About the company

Als Premium-Personaldienstleister stellen wir hohe Anforderungen an die Qualität unserer Leistungen und setzen neue Maßstäbe im Service.

Wir zeichnen uns durch hohen Qualitätsanspruch, Stabilität, Innovationskraft, Flexibilität und Nachhaltigkeit aus. Wir sind ein ausgezeichneter Arbeitgeber: bei uns werden Zusammenarbeit in gegenseitiger Wertschätzung und personelle Weiterentwicklung als Erfolgsfaktor für unsere Kunden gelebt.

Wir suchen für unseren Auftraggeber 1 Senior Data Platform Engineer (w/m/d) Werde Teil eines modernen Softwareunternehmens, das eine cloudbasierte Datenplattform betreibt, und übernimm Verantwortung für die Administration, Überwachung und Optimierung einer Big-Data-Umgebung in AWS. Du arbeitest mit modernsten Technologien wie Kafka, Flink, NiFi und DynamoDB und sorgst durch 3rd-Level-Support und Bereitschaftsdienst für hohe Verfügbarkeit.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on europa.eu
Prepare application

Good distractions

Loading talks and stories from around this role…