Lead Data Engineer Palantir Foundry

Capgemini
Canton of Toulouse-5, France
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
French
Experience level
Senior

Job location

Canton of Toulouse-5, France

Tech stack

API
Agile Methodologies
Amazon Web Services (AWS)
Information Systems
Hive
Python
OAuth
Performance Tuning
SAP Applications
SQL Databases
TypeScript
Management of Software Versions
Snowflake
Spark
Generative AI
PySpark
Databricks

Job description

Choisir Capgemini, c'est choisir une entreprise où vous serez en mesure de façonner votre carrière selon vos aspirations, où vous serez soutenu et inspiré par une communauté d'experts dans le monde entier, où vous pourrez réécrire votre futur. Rejoignez-nous pour redéfinir les limites de ce qui est possible, contribuer à libérer la valeur de la technologie pour les plus grandes organisations et participez à la construction d'un monde plus durable et inclusif., En tant que Lead Data Engineer Palantir Foundry au sein de la practice Insights & Data, vous interviendrez sur tout le cycle de vie data/ops dans Foundry :

  • Co-concevoir l'Ontologie métier en lien avec les équipes produit et métiers, afin d'aligner les jeux de données et modèles sur des concepts réels et opérables.
  • Définir et industrialiser des Data pipelines (PySpark, SQL) : ingestion, normalisation, qualité, historisation, optimisation des coûts/performances, scheduling et monitoring.
  • Garantir la qualité, la sécurité et la gouvernance : versioning, traçabilité/lineage, contrôles d'accès, normes de code et de tests. en s'appuyant sur les mécanismes de gouvernance Foundry et les guidelines PySpark).
  • Animer et faire grandir l'équipe : cadrage technique, mentoring, pair programming, revues de conception, diffusion des standards Foundry & Spark.
  • Piloter l'amélioration continue : définir et suivre des KPI (fraîcheur, SLA, fiabilité, coût), automatiser la détection des régressions et l'observabilité des jobs.

Requirements

  • Vous justifiez de 6 ans et plus d'expérience (hors stages et alternance) en ingénierie Data, avec une expérience significative sur Palantir Foundry en environnement de production.
  • Vous maîtrisez PySpark et Spark SQL pour le traitement distribué de données : optimisation des performances, partitionnement, joins, gestion des shuffles, broadcast joins, UDF et pandas UDF.
  • Vous avez une solide expérience dans le développement d'Actions orientées opérations (function-backed), en TypeScript et/ou Python, incluant l'intégration applicative et l'automatisation des workflows.
  • Vous êtes capable de concevoir et modéliser une Ontologie exploitable (objets, relations, propriétés, actions) et de travailler en co-conception étroite avec les équipes métiers et produit.
  • Vous connaissez les APIs Foundry (REST, OAuth) pour exposer des services et assurer l'intégration avec l'écosystème du système d'information.
  • Vous démontrez un leadership technique reconnu : encadrement de développeurs, définition et diffusion de standards, accompagnement des équipes dans leur montée en compétences.

Quelques raisons de nous rejoindre

Projets variés et innovants : intervenez sur des missions à fort impact dans des secteurs durables et technologiques (énergies renouvelables, transports, IA, data…), avec des opportunités d'évolution.

Apprentissage en continu : accédez à des ressources dédiées telles que notre GenAI Campus, certifications techniques (SAP, databricks, Agile…) et des plateformes de formation.

Événements et partenariats : participez à des conférences sectorielles et événements partenaires (AWS, Snowflake, SAP…).

Nos engagements et priorités

About the company

Capgemini ist einer der weltweit führenden Anbieter von Management- und IT-Beratung, Technologie-Services und Digitaler Transformation. Als ein Wegbereiter für Innovation unterstützt das Unternehmen seine Kunden bei deren komplexen Herausforderungen rund um Cloud, Digital und Plattformen.

Apply for this position