Data Engineer confirmé

ANAFI CONSULTING

Canton d'Aix-en-Provence-2, France

6 days ago

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Working hours

Regular working hours

Languages

French

Experience level

Intermediate

Job location

Canton d'Aix-en-Provence-2, France

Tech stack

API

Airflow

Google BigQuery

Cloud Computing

Cloud Storage

Code Review

Continuous Integration

Fraud Prevention and Detection

Python

Performance Tuning

SQL Databases

Data Streaming

Management of Software Versions

Google Cloud Platform

GIT

Xl Deploy

Job description

Au sein de la Direction des Systèmes d'Information d'un acteur majeur du secteur bancaire, vous intégrez une équipe Data en charge de la conception, du développement et du maintien en conditions opérationnelles des pipelines de données. Vous intervenez en transverse auprès de plusieurs directions métiers (Marketing, Fraude, Risque) pour répondre à leurs besoins en données fiables et accessibles., Concevoir, développer et industrialiser les pipelines de données (batch et/ou temps réel) pour alimenter les cas d'usage métiers

Développer et maintenir des APIs de mise à disposition des données

Assurer le Build et le Run des solutions data : monitoring, gestion des incidents, optimisation des performances

Collaborer avec les équipes métiers Marketing, Fraude et Risque pour comprendre les besoins, modéliser les flux de données et garantir la qualité des livrables

Participer à l'industrialisation des déploiements via les outils XL Release et XL Deploy ()

Mettre en place et maintenir les workflows d'orchestration sur GCP Cloud Composer (Airflow)

Contribuer à l'amélioration continue des pratiques (documentation, tests, revues de code)

Stack technique

Langages : Python, SQL

Cloud : Google Cloud Platform (BigQuery, Cloud Storage, Pub/Sub?)

Orchestration : Cloud Composer (Apache Airflow)

CI/CD & Déploiement : XL Release, XL Deploy ()

Versioning : Git