Data Engineer Gcp - Python - Spark - Risques Climatiques & Crédit > 3A Paris H/F

Neonum
Paris, France
8 days ago
Apply on www.hellowork.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Experienced
Experience required
3 years minimum
Working hours
Regular working hours

Tech stack

Airflow BigQuery Databases Data Integration Data Security DevOps Python (Programming Language) Machine Learning Meta-Data Management Data Streaming Google Cloud Apache Spark
+5 more
Pyspark Data Management Xl Deploy Terraform Jenkins

Job description

Au sein de l’entité Technologie & Opérations - DSI Corporate, vous intégrerez le domaine « Pertes, Garanties et Entrepôt Risques » dans le cadre du projet stratégique « Risques Climatiques & Physiques ».

L’objectif du projet est de construire et faire évoluer une solution Data permettant d’ingérer, agréger et exposer des données issues de sources multiples, afin de produire les rapports métiers nécessaires à la surveillance du risque de crédit.

La plateforme est développée sur Google Cloud Platform (GCP) et s’inscrit dans un environnement Data à forts enjeux, forte volumétrie et forte visibilité. Vous rejoindrez une équipe expérimentée et interviendrez aussi bien sur la conception et le développement des traitements que sur leur industrialisation, leur maintien en conditions opérationnelles et l’évolution des infrastructures associées.

Une expérience préalable dans le risque de crédit ou, plus largement, dans un environnement bancaire constitue un réel atout.

Missions détaillées

En tant que Data Engineer GCP, vous prendrez notamment en charge :

  • La conception et le développement de solutions Data sur Google Cloud Platform ;
  • Le développement et l’intégration de traitements Python / Spark ;
  • La conception, la mise en place et l’évolution des pipelines d’ingestion et de traitement de données ;
  • L’ingestion, l’agrégation et l’exposition de données provenant de sources multiples ;
  • Le développement et l’optimisation de traitements à forte volumétrie ;
  • La collecte, le stockage et l’exploitation des différents flux de données ;
  • La supervision et l’intégration de données de différentes natures ;
  • Le contrôle et l’amélioration de la qualité et de la sécurité des données ;
  • La structuration des bases de données ;
  • La gestion des métadonnées et référentiels ;
  • La documentation et la cartographie des différentes sources de données ;
  • La contribution à l’industrialisation des traitements et des modèles ;
  • L’industrialisation des modèles de Machine Learning ainsi que leur maintien en RUN ;
  • La maintenance et le suivi du RUN des applications développées ;
  • La maintenance des infrastructures Data associées ;
  • La proposition et la mise en oeuvre d’évolutions des infrastructures et solutions Data existantes.

Stack technique

Développement & Data

  • Python : excellente maîtrise indispensable
  • Spark : excellente maîtrise indispensable
  • Développement et intégration de solutions Data sur Google Cloud Platform
  • Pipelines d’ingestion et de traitement de données
  • Traitements Data à forte volumétrie
  • Industrialisation de traitements et modèles ML

Google Cloud Platform

Une excellente maîtrise opérationnelle de GCP est attendue, notamment sur :

  • BigQuery
  • Dataproc
  • Cloud Composer
  • Cloud Functions
  • Cloud Run Jobs
  • Google Cloud Storage (GCS)

DevOps

Une bonne maîtrise de la chaîne DevOps est attendue, en particulier :

  • Terraform
  • Jenkins
  • XL Deploy (XLD)

Les expertises techniques sur Python, Spark, GCP et les différents services GCP cités sont considérées comme impératives compte tenu du caractère stratégique et de la visibilité du projet.

Requirements

Profil recherchéProfil recherchéNous recherchons un Data Engineer GCP confirmé disposant de 3 à 6 ans d’expérience, avec une expérience concrète et significative en développement Python / Spark sur Google Cloud Platform.Vous devrez être capable de démontrer une utilisation opérationnelle de BigQuery, Dataproc, Cloud Composer, Cloud Functions, Cloud Run Jobs et Google Cloud Storage.Une bonne maîtrise des pratiques et outils DevOps est également attendue, notamment Terraform, Jenkins et XL Deploy.Une expérience sur des projets Data à forte volumétrie, ainsi qu’une bonne compréhension des problématiques de qualité, sécurité et gouvernance de la donnée, seront particulièrement pertinentes.Sur le plan fonctionnel, une connaissance des environnements bancaires et une expérience du risque de crédit constituent des atouts différenciants. L’expérience en risque de crédit est appréciée mais n’est pas impérative.Enfin, vous devrez démontrer :Une bonne autonomie dans la prise en charge des sujets ;Une bonne capacité de communication ;Une réelle fluidité dans le travail en équipe ;La capacité à intervenir dans un environnement Data stratégique, exigeant et à forte visibilité., Nous recherchons un Data Engineer GCP confirmé disposant de 3 à 6 ans d’expérience, avec une expérience concrète et significative en développement Python / Spark sur Google Cloud Platform.

Vous devrez être capable de démontrer une utilisation opérationnelle de BigQuery, Dataproc, Cloud Composer, Cloud Functions, Cloud Run Jobs et Google Cloud Storage.

Une bonne maîtrise des pratiques et outils DevOps est également attendue, notamment Terraform, Jenkins et XL Deploy.

Une expérience sur des projets Data à forte volumétrie, ainsi qu’une bonne compréhension des problématiques de qualité, sécurité et gouvernance de la donnée, seront particulièrement pertinentes.

Sur le plan fonctionnel, une connaissance des environnements bancaires et une expérience du risque de crédit constituent des atouts différenciants. L’expérience en risque de crédit est appréciée mais n’est pas impérative.

Enfin, vous devrez démontrer :

  • Une bonne autonomie dans la prise en charge des sujets ;
  • Une bonne capacité de communication ;
  • Une réelle fluidité dans le travail en équipe ;
  • La capacité à intervenir dans un environnement Data stratégique, exigeant et à forte visibilité.

EUR

Machine learning Google cloud platform Gestion des données Travail en équipe Jenkins Python Risques financiers Autonomie

Benefits & conditions

Taux journalier :430 € HT légèrement négociable selon la séniorité.css-11k7fwb{display:inline-block;white-space:nowrap;vertical-align:middle;-webkit-padding-start:var(–chakra-space-1-5);padding-inline-start:var(–chakra-space-1-5);-webkit-padding-end:var(–chakra-space-1-5);padding-inline-end:var(–chakra-space-1-5);text-transform:none;font-size:var(–chakra-fontSizes-xs);border-radius:var(–chakra-radii-md);font-weight:var(–chakra-fontWeights-semibold);background:var(–chakra-colors-success-200);color:var(–chakra-colors-success-700);box-shadow:var(–badge-shadow);padding:4px 6px;–badge-bg:var(–chakra-colors-success-100);–badge-color:colors.success.800;}.chakra-ui-dark .css-11k7fwb:not([data-theme]),[data-theme=dark] .css-11k7fwb:not([data-theme]),.css-11k7fwb[data-theme=dark]{–badge-bg:rgba(226, 243, 232, 0.16);–badge-color:var(–chakra-colors-success-200);}Cette offre est à 0% de commission .css-74lrwu{width:1em;height:1em;line-height:1em;-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;color:currentColor;font-size:16px;display:-webkit-box;display:-webkit-flex;display:-ms-flexbox;display:flex;-webkit-transition:.1s ease-in-out color;transition:.1s ease-in-out color;}.css-74lrwu *{-webkit-transition:.1s ease-in-out fill;transition:.1s ease-in-out fill;fill:var(–chakra-colors-rythm-600);}

False

EducationalOccupationalCredential postgraduate degree EducationalOccupationalCredential bachelor degree EducationalOccupationalCredential

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com
Prepare application

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

1:22 min

Analyzing differences between mobile and traditional backend DevOps

Mete Baydar Mete Baydar · World Congress 2025

1:31 min

Implementing initial GitOps architecture with Jenkins and Argo CD

Lian Li · World Congress 2022

4:32 min

Harnessing Spark with Python using PySpark and Py4J

Ayon Roy · LIVE

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

3:27 min

Defining DevOps through its historical origins and foundational texts

Sonal Patil · LIVE

1:34 min

Bringing diverse skills to industrial data science roles

Katja Träumner

Videos

See all

Related articles

See all