Data Engineer - Expertise Azure & Databricks H/F
Role details
Job location
Tech stack
Job description
Concevoir, développer et maintenir des pipelines de données robustes et évolutifs.
-
Intégrer et transformer des données provenant de sources multiples dans un environnement Azure.
-
Exploiter Databricks pour le traitement et l'analyse de données à grande échelle.
-
Assurer la qualité, la sécurité et la gouvernance des données.
-
Collaborer avec les équipes BI et Data Science pour fournir des datasets optimisés.
-
Développer des solutions de reporting et de visualisation via Power BI.
-
Participer à la définition des architectures data et à l'optimisation des performances.
-
Azure Data Services : Azure Data Factory, Azure Synapse, Azure Data Lake.
-
Databricks : maîtrise des notebooks, Spark, optimisation des jobs.
-
Power BI : création de dashboards interactifs, DAX, intégration avec Azure.
Requirements
Python avancé : manipulation de données (pandas, PySpark), automatisation, scripts ETL.
- SQL avancé : requêtes complexes, optimisation, gestion des bases relationnelles.
- Connaissance des bonnes pratiques en DataOps et CI/CD pour les pipelines data.