Data Engineer Python SAS GCP

Groupe HN SAS
Paris, France
26 days ago
Apply on www.indeed.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Job source

Tech stack

Microsoft Windows Airflow Amazon Web Services Automation of Tests Unit Testing Microsoft Azure Cloud Computing Continuous Integration Extract Transform Load (ETL) Data Security Github Python (Programming Language)
+15 more
Data Mesh SAS (Software) SonarQube SQL Databases Management of Software Versions Google Cloud Gitlab Git Pandas Containerization Pyspark Kubernetes Data Analytics Dask Docker

Job description

Au sein des équipes Data & Analytics, vous rejoindrez l?équipe Décisionnel Dommage dont la mission est de mettre à la disposition des métiers, via une plateforme BI, les données et outils nécessaires aux études et aux reportings de l?entreprise.

La plateforme hébergeant ces données est basée sur la solution SAS (SAS 9.4 sous Windows). Un projet de modernisation majeur a débuté avec une migration du patrimoine vers Google Cloud Platform et nous aurions besoin d?une ressource supplémentaire pour migrer les programmes et en développer de nouveaux.

Le candidat aura pour mission d’assurer la qualité, la cohérence et la performance des solutions data développées au sein de l’équipe.

Il rejoindra une équipe de 6 collaborateurs internes (business analyst, data engineer, chefs de projets) et des ressources externes. Il travaillera en étroite collaboration avec les chefs de projets de l?équipe.

Développement et architecture DATA :

  • Concevoir et développer des pipelines de données robustes et scalables (ETL/ELT) ;

  • Garantir la qualité des données via la mise en ?uvre de tests automatisés et de contrôles qualité.

Pilotage et coordination :

  • Contribuer aux chiffrages et à la planification des développements ;

  • Assurer la documentation technique des solutions mises en ?uvre ;

  • Accompagner et mentorer les développeurs juniors et confirmés

Livrables attendus :

  • Documentation technique des pipelines développés ;

  • Code source versionné et testé, conforme aux standards définis ;

  • Reporting régulier sur l’avancement des travaux ;

  • Participation aux comités techniques et aux revues d’architecture.

Requirements

  • Python avancé : maîtrise des frameworks data (PySpark, Pandas, Polars, Dask)

  • Orchestration : Airflow, Prefect ou équivalent

  • Cloud : expérience sur au moins un provider (AWS, Azure, GCP) ? environnement GCP privilégié

  • SQL : maîtrise avancée, optimisation de requêtes

  • Outils de versioning : Git, GitLab/GitHub

  • CI/CD : mise en place et gestion de pipelines d’intégration continue

  • Conteneurisation : Docker, Kubernetes (apprécié)

  • Qualité de code : tests unitaires, SonarQube, ?

  • SAS : la connaissance du langage SAS serait un atout pour la réaliser la migration

Compétences fonctionnelles :

  • Bonne compréhension des enjeux data (gouvernance, qualité, sécurité des données)

  • Connaissance des concepts de Data Mesh ou Data Fabric (apprécié)

  • Sensibilité aux problématiques de conformité et de protection des données (RGPD)

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.indeed.com
Prepare application

Good distractions

Loading talks and stories from around this role…