Big Data Engineer H/F
Role details
Job location
Tech stack
Job description
Vous êtes passionné·e par la data et les plateformes Big Data ? Ce poste est fait pour vous.
En tant que Big Data Engineer, vous êtes responsable du développement et de l'exploitation de notre écosystème :
Côté build :
- Concevoir et développer les pipelines de données du datalake FinLake
- Implémenter des traitements Big Data performants en Spark et PySpark
- Participer à l'évolution de l'architecture de la plateforme Big Data
- Développer des solutions répondant aux besoins des équipes IT et métiers
- Intégrer les développements dans les pipelines CI/CD
Côté run :
- Assurer la gestion et le maintien en conditions opérationnelles du datalake
- Superviser la production et traiter les incidents
- Gérer et réduire la dette technique de la plateforme
- Optimiser les performances des traitements et des requêtes
- Garantir la fiabilité et la qualité des données, Chez Consort Group, vous êtes un·e expert·e qu'on accompagne pour que chaque mission devienne une étape qui compte.
- Un onboarding attentif et humain
- Une vraie proximité managériale
- Des formations accessibles en continu
- Des engagements concrets : inclusion, égalité, solidarité
- Le programme Move Up x United Heroes pour bouger et respirer
- Un package RH complet : mutuelle, carte TR, CSE, prévoyance
- Une culture du feedback et des projets qui font sens
C'est clair
Le process de recrutement :
- Un premier échange téléphonique avec notre team recrutement
- Un entretien RH ainsi qu'un échange métier avec un.e ingénieur.e d'affaires
- Un test ou un échange technique avec un.e de nos expert.es
- Un dernier point avec votre futur.e manager ou responsable de mission
Requirements
Do you have experience in UNIX?, Vous avez entre 3 et 6 ans d'expérience dans des environnements exigeants. Vous aimez construire et faire évoluer des plateformes data sans jamais cesser d'innover. Vous cherchez un cadre où vos idées comptent et où la technique va de pair avec la collaboration.
C'est votre expertise :
- Environnement Linux / Unix, Hadoop on premise,
- Spark, PySpark, Scala (obligatoires)
- Hive, SQL/HQL, Starburst, Indexima, Jenkins, pipelines CI/CD, XLDeploy / XLRelease
C'est votre manière de faire équipe :
- Esprit d'analyse et capacité à résoudre des problématiques complexes
- Sens du collectif, rigueur et autonomie dans un environnement Agile et DevOps