Développeur / Développeuse Big Data (H/F)

Keypeople Consulting
Paris, France
1 day ago
Apply on candidat.francetravail.fr
Prepare application

Role details

Contract type
Contract
Employment type
Full-time (> 32 hours)
Experience level
Expert
Experience required
8 years minimum
Working hours
Regular working hours

Tech stack

Application Programming Interfaces (APIs) Airflow Amazon Web Services Amazon S3 Apache HTTP Server Big Data Cloud Computing Extract Transform Load (ETL) Python (Programming Language) Data Streaming Datadog Apache Spark
+3 more
Kubernetes Terraform Docker

Job description

Nous recherchons actuellement un(e) Data Engineer Senior pour accompagner une équipe Data sur des sujets à forts enjeux autour de la Data Engineering, du Big Data et des architectures Lakehouse., Concevoir, développer et optimiser des pipelines de données à grande échelle

  • Mettre en ?uvre des flux batch, streaming et ingestion via API

  • Structurer les transformations selon le modèle Médaillon (Bronze / Silver / Gold)

  • Développer et industrialiser les pipelines avec DBT, Spark et Iceberg

  • Contribuer à l?évolution et à l?optimisation de l?architecture Lakehouse

  • Déployer et maintenir les pipelines dans un environnement Cloud AWS

  • Orchestrer les workflows ETL / ELT avec Airflow

  • Mettre en ?uvre l?Infrastructure as Code avec Terraform

  • Travailler sur des environnements conteneurisés avec Docker / Kubernetes

  • Garantir la disponibilité, la supervision et l?observabilité des traitements

  • Participer à la gestion des incidents et à l?amélioration continue

  • Définir et mettre en ?uvre les règles de qualité des données : tests, validations et contrôles automatisés

  • Documenter les architectures, pipelines et règles métier

  • Garantir la conformité des flux, notamment dans le respect des exigences RGPD

?? Environnement technique :

  • DBT / Data Catalog

  • Apache Spark

  • Apache Iceberg, Modélisation et collecte de données

Requirements

Minimum 8 ans d?expérience en Data Engineering

  • Expertise confirmée des architectures Big Data et Lakehouse

  • Très bonne maîtrise de DBT, Spark, Iceberg, AWS et Terraform

  • Solide expérience sur les services AWS, notamment Glue, EMR et S3

  • Connaissance de Trino / Starburst et Datadog

  • Bon niveau en Python

  • Forte capacité d?analyse et de compréhension des enjeux métiers

  • Expérience dans l?accompagnement et l?encadrement de profils juniors

  • Autonomie, rigueur et forte culture de l?amélioration continue

? Contexte :

  • Environnement Data à grande échelle

  • Projets autour de la modernisation et de l?industrialisation des plateformes Data

  • Forts enjeux Lakehouse, Data Quality, Observabilité et Cloud

  • Collaboration avec des équipes Data, IT et métiers

Benefits & conditions

AWS : Glue, EMR, S3?

  • Terraform

  • Airflow

  • Python

  • Trino / Starburst

  • Datadog

  • Docker / Kubernetes

  • Architectures Big Data / Lakehouse, ? Localisation : Île-de-France ? Hybride

? Télétravail : 3 jours par semaine

? Démarrage : fin août 2026

? Mission longue durée

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on candidat.francetravail.fr
Prepare application

Good distractions

Loading talks and stories from around this role…