Data Engineer / Expert Hadoop (Société Générale - GCOO)

Société Générale recherche un Data Engineer / Expert Hadoop pour assurer l'administration, la maintenance et l'évolution de sa plateforme Big Data Cloudera CDP. La mission porte sur la fiabilité, la performance, les montées de version et l'automatisation de l'infrastructure Big Data.

? Missions principales

Administrer et maintenir les clusters Hadoop Cloudera CDP.

Participer aux montées de version des composants Hadoop.

Résoudre les incidents techniques complexes et intervenir en task force.

Automatiser les déploiements, le patching et l'exploitation avec Ansible et Terraform/Terragrunt.

Garantir la disponibilité, la performance et la sécurité de la plateforme.

Gérer les changements (tests, rollback, mise en production).

Collaborer avec Cloudera et les équipes internes.

Rédiger la documentation technique.

? Stack technique

Big Data : Hadoop, Cloudera CDP 7.1.9, Spark

Ingestion : Kafka, Apache NiFi

Automatisation : Ansible, Terraform, Terragrunt, AWX

Versioning / Scripting : Shell, Git, GitHub

10 à 20 ans d'expérience.

Expertise confirmée en administration Hadoop / Cloudera CDP.

Très bonne maîtrise de Spark, Kafka et Apache NiFi.

Solides compétences en automatisation (Ansible, Terraform, Terragrunt, AWX).

Expérience des environnements de production critiques (MCO, incidents, performances, upgrades).

Autonome, rigoureux et capable de travailler avec des équipes techniques et l'éditeur Cloudera.