Data Engineer Databricks / Azure

ETHNOL CONSULTING

Lyon, France

6 days ago

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Working hours

Regular working hours

Languages

French

Experience level

Senior

Compensation

€ 60K

Job location

Remote

Lyon, France

Tech stack

Azure

Cloud Computing

Data Streaming

Spark

Data Lake

PySpark

Databricks

Job description

Vous intégrerez une équipe Data intervenant sur des plateformes modernes en environnement Microsoft Azure, avec un fort usage de Databricks, afin de structurer, fiabiliser et optimiser les flux de données.

Missions principales

Concevoir, développer et maintenir des pipelines de données robustes et scalables
Exploiter, administrer et optimiser des plateformes Databricks sur Azure
Participer à l'industrialisation des flux Data (ingestion, transformation, exposition)
Travailler sur des enjeux de performance, qualité et fiabilité des données
Collaborer étroitement avec les équipes Data, Métiers et IT
Contribuer aux bonnes pratiques Data et à l'amélioration continue de la plateforme

Requirements

Do you have experience in Spark?, * Minimum 5 ans d'expérience en tant que Data Engineer

Expertise confirmée sur Databricks
Très bonne maîtrise de l'environnement Azure

(Data Factory, Data Lake, Synapse, etc.)

Solide expérience sur Spark / PySpark
Bonne connaissance des architectures Data modernes
Autonomie, rigueur et excellent relationnel, * Expérience sur des environnements Cloud complexes
Sensibilité aux enjeux métiers et à la valorisation de la donnée
Capacité à challenger l'existant et proposer des optimisations pertinentes