Data Engineer Databricks Confirmé

Starclay
Canton of Courbevoie-2, France
7 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
French
Experience level
Intermediate

Job location

Canton of Courbevoie-2, France

Tech stack

Amazon Web Services (AWS)
Azure
Cloud Computing
Continuous Integration
Information Engineering
DevOps
Python
Data Streaming
Spark
Gitlab
Containerization
Gitlab-ci
Integration Tests
Kubernetes
Terraform
Docker
Jenkins
Databricks

Job description

Ingénierie de données : Concevoir, développer et tester des pipelines de données (Batch & Streaming) exclusivement sous Databricks.

  • Culture DevOps : Opérationnaliser les traitements via CI/CD et tests d'intégration, puis assurer la mise en production.
  • Performance et FinOps : Optimiser la consommation des ressources Cloud et la rapidité des traitements Databricks.
  • Expertise et Support : Intervenir en support expert pour la résolution d'incidents complexes par l'analyse des causes racines.
  • Outillage : Maintenir et faire évoluer les outils d'automatisation mis à disposition des développeurs data.

Requirements

Issu d'une formation Bac +5 (ingénieur ou universitaire), vous justifiez d'au moins 5 ans d'expérience en tant que data engineer et une mission concrète avec databricks.Expertise Technique : Développeur en Python, Spark et ScalaCertification : Une certification Databricks Certified Data Engineer Associate ou Professional est requiseCloud et Infra : Expérience sur AWS ou Azure. Maîtrise des outils Terraform, Jenkins ou GitLab CIConteneurisation : Pratique de Docker ou KubernetesData Responsable : Sensibilité aux enjeux RGPD, au Data Act et à l'optimisation environnementale des codesQualités : Rigueur analytique , excellente communication orale et rédactionnelle et curiosité technique, Issu d'une formation Bac +5 (ingénieur ou universitaire), vous justifiez d'au moins 5 ans d'expérience en tant que data engineer et une mission concrète avec databricks.

  • Expertise Technique : Développeur en Python, Spark et Scala
  • Certification : Une certification Databricks Certified Data Engineer Associate ou Professional est requise
  • Cloud et Infra : Expérience sur AWS ou Azure. Maîtrise des outils Terraform, Jenkins ou GitLab CI
  • Conteneurisation : Pratique de Docker ou Kubernetes
  • Data Responsable : Sensibilité aux enjeux RGPD, au Data Act et à l'optimisation environnementale des codes
  • Qualités : Rigueur analytique , excellente communication orale et rédactionnelle et curiosité technique

About the company

L'approche de Starclay au sein du Groupe Partenor se caractérise par une double compétence Métier et SI ; mettre les utilisateurs au centre de tous les projets depuis la formalisation des besoins jusqu'à la formation de ces derniers. Nous nous positionnons en tant qu'acteur clé dans les dispositifs d'amélioration continue notamment à travers l'IA générative. Vous rejoignez un acteur majeur engagé dans une transformation data d'envergure. Au sein de l'équipe Plateforme, vous êtes garant de la conception, de l'optimisation et de la fiabilité des pipelines d'ingestion pour l'ensemble des applications Data et IA du Groupe. Votre niveau de responsabilité sera adapté selon votre séniorité.

Apply for this position