Data Engineer Databricks Confirmé H/F

Groupe Delta
Lyon, France
6 days ago
Apply on www.hellowork.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Experienced
Experience required
3 years minimum
Compensation
€45,000.0 - €65,000.0
Working hours
Regular working hours

Tech stack

Clean Code Principles Agile Methodology Amazon Web Services Unit Testing Microsoft Azure Cloud Computing Continuous Integration Data Warehousing DevOps Apache Hive Python (Programming Language) DataOps
+14 more
Software Engineering SQL Databases Strategies of Testing Google Cloud Test-Driven Development (TDD) Apache Spark Git Pytest Data Lakes Pyspark Data Lakehouse Terraform Software Version Control Databricks

Job description

Vous intervenez au coeur de la conception, de l’industrialisation et de la montée en puissance de plateformes Data Lakehouse stratégiques. Vous appliquez la rigueur et les standards du génie logiciel (Clean Code, TDD, CI/CD, DataOps) aux architectures Modern Data Stack., Concevoir et optimiser des pipelines de données scalables et performants sur Databricks.

  • Mettre en oeuvre et standardiser l’architecture Médaillon (Bronze, Silver, Gold) sur Delta Lake.
  • Définir les bonnes pratiques de développement, les stratégies de tests automatisés et garantir la qualité logicielle du code.
  • Mettre en place et maintenir les chaînes de déploiement CI/CD appliquées aux pipelines Data (Databricks Asset Bundles, Terraform).
  • Collaborer en mode Agile avec des profils transverses (Architectes, PO, DevOps, ML Engineers) et apporter un véritable poids décisionnel chez nos clients.

Requirements

Profil recherchéNous recherchons un profil disposant de minimum 3 ans sur Databricks en Data Engineering. Doté d’une forte sensibilité aux bonnes pratiques de Software Engineering et d’une expertise reconnue sur l’écosystème Databricks de minimum 3 ans hors stage et alternance.Compétences techniques clés :Maîtrise avancée de la plateforme Databricks et d’Apache Spark (PySpark, Spark SQL).Expertise sur Delta Lake et ses mécanismes avancés (Delta log, ACID, time travel).Solide bagage en Software Engineering : maîtrise avancée de Python et SQL, tests unitaires (pytest), contrôle de version (Git) et CI/CD.Connaissance des environnements Cloud (AWS, Azure ou GCP) et des enjeux de performance/coûts.La possession d’une certification Databricks (Associate ou Professional) est un vrai plus.Soft Skills & Posture :Esprit d’équipe, rigueur, autonomie et vraie capacité pédagogique/vulgarisation.Leadership technique (pour la tranche Senior/Tech Lead) et goût pour le partage de connaissances., Nous recherchons un profil disposant de minimum 3 ans sur Databricks en Data Engineering. Doté d’une forte sensibilité aux bonnes pratiques de Software Engineering et d’une expertise reconnue sur l’écosystème Databricks de minimum 3 ans hors stage et alternance.

Compétences techniques clés :

  • Maîtrise avancée de la plateforme Databricks et d’Apache Spark (PySpark, Spark SQL).
  • Expertise sur Delta Lake et ses mécanismes avancés (Delta log, ACID, time travel).
  • Solide bagage en Software Engineering : maîtrise avancée de Python et SQL, tests unitaires (pytest), contrôle de version (Git) et CI/CD.
  • Connaissance des environnements Cloud (AWS, Azure ou GCP) et des enjeux de performance/coûts.
  • La possession d’une certification Databricks (Associate ou Professional) est un vrai plus.

Soft Skills & Posture :

  • Esprit d’équipe, rigueur, autonomie et vraie capacité pédagogique/vulgarisation.
  • Leadership technique (pour la tranche Senior/Tech Lead) et goût pour le partage de connaissances., Apache spark Management d’équipe SQL AWS Git Test driven development (TDD) Python Autonomie

Benefits & conditions

Salaire :Entre 45 000€ et 65 000€ selon profil

About the company

Rejoignez un pure-player du conseil et de l’ingénierie Data en pleine croissance à Lyon. Structure à taille humaine et expertisé avec la présence de plusieurs expert de la Modern Data Stack.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com
Prepare application

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

6:21 min

Investigating push inefficiencies with upstream Git experts

Jonathan Creamer · Coffee With Developers

3:05 min

Tagging and organizing execution scenarios with pytest markers

Florian Bruhin · World Congress 2021

2:17 min

Mapping the maturity roadmap for scaled devops adoption

Dominik Krichbaum Dominik Krichbaum · World Congress 2026 Europe

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

56 sec

Favorite git commands and the importance of patch commits

Eileen Uchitelle Eileen Uchitelle +1 · Coffee With Developers

1:34 min

Bringing diverse skills to industrial data science roles

Katja Träumner

Videos

See all

Related articles

See all