Ingénieur Data - DevOps Azure Databricks H/F

Groupe Viveris
Lyon, France
18 days ago
Apply on www.hellowork.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
English

Tech stack

Application Programming Interfaces (APIs) Microsoft Azure Big Data Cloud Computing Continuous Integration Data Warehousing DevOps Github Apache Hive Python (Programming Language) Power BI Cloud Services
+13 more
SQL Databases Parquet Azure Data Factory Delivery Pipeline Apache Spark Git Data Lakes Pyspark Data Management Terraform Key Vault Jenkins Databricks

Job description

Au coeur d’un environnement Data à forts enjeux, la plateforme centralise des données issues de différents référentiels techniques, applicatifs, organisationnels et financiers afin de produire des indicateurs de pilotage et des tableaux de bord décisionnels. Vous rejoindrez une équipe intervenant sur des sujets à la fois Data, Cloud et DevOps, avec un rôle clé dans la conception et l’industrialisation des traitements de données. Votre périmètre couvrira notamment :

  • La conception et le développement de traitements Databricks / PySpark selon une architecture Bronze / Silver / Gold ;
  • L’industrialisation et l’optimisation des pipelines Data ;
  • L’automatisation et la gestion des infrastructures Azure avec Terraform ;
  • La mise en oeuvre et le maintien des chaînes CI/CD avec Jenkins et GitHub ;
  • La supervision et l’exploitation de la plateforme Data.

La mission offre également une véritable dimension de conseil et d’accompagnement : études d’opportunité, sujets d’innovation, réflexions autour des architectures Data et recommandations visant à optimiser les performances, la fiabilité et les coûts des solutions., Concevoir et industrialiser les traitements de données Databricks (PySpark) selon une architecture Bronze / Silver / Gold ;

  • Développer, optimiser et maintenir les pipelines de données en garantissant performance, qualité et maîtrise des coûts ;
  • Exploiter les formats de données (Delta, Parquet, CSV) et mettre en oeuvre les bonnes pratiques associées ;
  • Assurer la supervision de la plateforme data via Azure Data Factory : monitoring, alerting, suivi de la qualité des données et reporting ;
  • Renforcer la fiabilité et la résilience des traitements en participant à la gestion des incidents, à la détection d’anomalies et à l’amélioration continue ;
  • Contribuer aux activités DevOps et Cloud en maintenant les infrastructures et pipelines CI/CD (Terraform, Jenkins, GitHub) et en collaborant avec les équipes métiers et techniques.

Requirements

Profil recherché :Vous faites preuve d’autonomie, de rigueur et d’esprit d’initiative, avec une réelle capacité à analyser des problématiques complexes et à proposer des solutions pertinentes ; Vous disposez d’un bon sens de l’organisation et d’une capacité d’adaptation vous permettant d’évoluer efficacement dans un environnement d’entreprise exigeant ; Vous êtes à l’aise dans la gestion des priorités et appréciez le travail en collaboration avec des interlocuteurs variés, aussi bien techniques que métiers ; Vous possédez de bonnes qualités rédactionnelles et relationnelles, notamment pour formaliser les travaux réalisés et assurer une documentation claire et structurée ; Vous maîtrisez un anglais professionnel, à l’écrit comme à l’oral.Azure Data : Databricks, Azure Data Factory, Azure Storage Account, Key Vault, Power BI ; Développement Data : Python, PySpark, SQL ; Data Lake / Data Warehouse : architecture Bronze / Silver / Gold, Delta Lake, Parquet, CSV ; Big Data : Apache Spark, DataFrame API, Spark SQL, traitements distribués ; DevOps / CI-CD : Terraform, Jenkins, GitHub, automatisation des déploiements ; Cloud : environnement Microsoft Azure, Azure SDK et intégration des services Cloud ; Expérience dans l’exploitation de plateformes Data en environnement Cloud / virtualisé. Compétences techniques :Nos avantages : Rémunération attractive et évolutive ;Mutuelle familiale à garantie haute ;Tickets restaurant pris en charge à 60% ;100% du titre de transport urbain remboursé ;2 jours de télétravail par semaine ;Formation continue avec Linkedin Learning et nos communautés techniques., * Vous faites preuve d’autonomie, de rigueur et d’esprit d’initiative, avec une réelle capacité à analyser des problématiques complexes et à proposer des solutions pertinentes ;

  • Vous disposez d’un bon sens de l’organisation et d’une capacité d’adaptation vous permettant d’évoluer efficacement dans un environnement d’entreprise exigeant ;
  • Vous êtes à l’aise dans la gestion des priorités et appréciez le travail en collaboration avec des interlocuteurs variés, aussi bien techniques que métiers ;
  • Vous possédez de bonnes qualités rédactionnelles et relationnelles, notamment pour formaliser les travaux réalisés et assurer une documentation claire et structurée ;
  • Vous maîtrisez un anglais professionnel, à l’écrit comme à l’oral.

  • Azure Data : Databricks, Azure Data Factory, Azure Storage Account, Key Vault, Power BI ;
  • Développement Data : Python, PySpark, SQL ;
  • Data Lake / Data Warehouse : architecture Bronze / Silver / Gold, Delta Lake, Parquet, CSV ;
  • Big Data : Apache Spark, DataFrame API, Spark SQL, traitements distribués ;
  • DevOps / CI-CD : Terraform, Jenkins, GitHub, automatisation des déploiements ;
  • Cloud : environnement Microsoft Azure, Azure SDK et intégration des services Cloud ;
  • Expérience dans l’exploitation de plateformes Data en environnement Cloud / virtualisé., Microsoft Azure Apache spark Anglais SQL Gestion des données Power BI Git Pro-activité Jenkins Big data Python Autonomie Terraform Capacité d’adaptation Sens de l’organisation

Benefits & conditions

EducationalOccupationalCredential postgraduate degree EducationalOccupationalCredential bachelor degree, * Rémunération attractive et évolutive ;

  • Mutuelle familiale à garantie haute ;
  • Tickets restaurant pris en charge à 60% ;
  • 100% du titre de transport urbain remboursé ;
  • 2 jours de télétravail par semaine ;
  • Formation continue avec Linkedin Learning et nos communautés techniques.

About the company

C’est pour accompagner notre client, un grand groupe national du secteur du transport, dans l’évolution et l’industrialisation de sa plateforme Data Cloud Azure que nous recherchons un Ingénieur Data orienté DevOps.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com
Prepare application

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

6:21 min

Investigating push inefficiencies with upstream Git experts

Jonathan Creamer · Coffee With Developers

2:17 min

Mapping the maturity roadmap for scaled devops adoption

Dominik Krichbaum Dominik Krichbaum · World Congress 2026 Europe

6:36 min

Funding open source through GitHub Accelerator and Sponsors

Stormy Peters · World Congress 2023

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

56 sec

Favorite git commands and the importance of patch commits

Eileen Uchitelle Eileen Uchitelle +1 · Coffee With Developers

1:34 min

Bringing diverse skills to industrial data science roles

Katja Träumner

Videos

See all

Related articles

See all