Data Engineer
Datamesh Gmbh
3 days ago
Role details
Contract type
Permanent contract Employment type
Part-time / full-time Working hours
Shift work Languages
English, German Experience level
JuniorJob location
Tech stack
Java
Airflow
Azure
Bash
Microsoft Outlook
Information Engineering
Linux
Python
Ansible
RSA (Cryptosystem)
Scala
Spark
Spring-boot
GIT
Information Technology
Terraform
Databricks
Job description
- Entwicklung von Datenpipelines auf Basis von Databricks auf Azure
- Entwicklung von Prefect / Dagster / Airflow Pipelines
- Entwicklung von Java Backends
- Entwicklung von Big Data Pipelines basierend auf Apache Spark
- Entwicklung von Real Time Applikationen basierend auf Apache Kafka
- Aufbau von Datalake inklusive Data Processing auf Basis von dbt tools
- Unterstützung im Konzeptions- und Design Prozessen
- Unterstützung bei der Bearbeitung von Kunden- und Supportanfragen
- Automatisierung von Infrastructure via Terraform (mit Python)
- Support für die Senior Entwickler
Requirements
- Abgeschlossenes Studium der Informatik oder vergleichbaren Studiengang
- Gute EDV-Kenntnisse mit Git, Outlook
- Linux / UNIX
- Gute Kenntnisse der englischen und deutschen Sprache in Wort und Schrift
- Selbstständige Arbeitsweise, zuverlässig und kommunikativ
- Mindestens 1 Jahr Databricks Erfahrung
- Mindestens 1 Jahr Azure Erfahrung
- Mindestens 1 Jahr Ci CD Erfahrung
- Mindestens 1 Jahr Data Engineering Erfahrung
- Fachwissen in einer der verschiedenen Programmiersprachen / Frameworks:
- Java / Scala
- Python
- Spring Boot / Apache Spark / Apache Airflow
- Bash / Ansible / ssh / RSA Keys / Networking
- Azure Cloud
- DBT / Databricks
About the company
Datamesh GmbH, ein innovatives Unternehmen im Bereich der Softwareentwicklung, sucht einen engagierten Data Engineer zur Verstärkung unseres dynamischen Teams. Mit Sitz in Deutschland und einem kleinen, aber hoch spezialisierten Team von 1-10 Mitarbeitern, bietet Datamesh GmbH die Möglichkeit, in einem agilen und kreativen Umfeld zu arbeiten. Unsere Leidenschaft für Technologie und Entwicklung neuer Softwarelösungen treibt uns an, die Grenzen des Möglichen zu erweitern. Als Data Engineer werden Sie eine zentrale Rolle spielen, indem Sie komplexe Datenarchitekturen entwickeln und implementieren, die unsere Softwarelösungen unterstützen.