Data Engineer - Python Spark & Intégration de Données H/F

Monetaryamount
Paris, France
3 days ago
Apply on www.hellowork.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
English

Tech stack

Application Programming Interfaces (APIs) Agile Methodology JIRA Cloud Computing Databases Data Integration Python (Programming Language) Office Automation Data Streaming Management of Software Versions Data Processing Data Server Interface
+5 more
Palantir Foundry Apache Spark Git Pyspark Data Management

Job description

Contexte : Notre client recherche un Data Engineer pour renforcer son équipe Data au sein de la DSI France. La mission consiste à développer des intégrations et traitements de données, produire des reportings et contribuer au suivi quotidien des flux et applications, dans un environnement utilisant notamment Palantir. Missions principales :

  • Recueillir et analyser les besoins métiers afin de proposer des solutions techniques adaptées.
  • Concevoir et développer les intégrations et traitements de données.
  • Réaliser les développements et configurations dans l’environnement Palantir.
  • Développer des traitements de données avec Python et Spark.
  • Manipuler les bases de données, les APIs et les solutions de stockage.
  • Participer à l’automatisation des traitements et des flux de données.
  • Contribuer à la production des reportings et à la valorisation des données.
  • Documenter les développements et présenter les réalisations aux équipes.
  • Participer aux phases de recette et de validation.
  • Assurer le suivi quotidien des flux de données et des applications.
  • Collaborer avec les équipes BI, Data et les autres membres du projet.
  • Participer aux échanges techniques et aux activités Agile de l’équipe.

Livrables attendus :

  • Développements et configurations réalisés dans Palantir.
  • Pipelines d’intégration et de traitement des données.
  • Scripts Python et traitements Spark.
  • Reportings et restitutions des données.
  • Documentation technique et fonctionnelle des réalisations.
  • Supports de présentation et comptes rendus.
  • Résultats des recettes et corrections associées.
  • Suivi des flux et des applications Data.

Requirements

Expérience en Data Engineering, intégration et traitement de données.

  • Bonne maîtrise de Python et du framework Apache Spark.
  • Compétences en bases de données, stockage, Cloud et automatisation.
  • Expérience dans la manipulation et l’intégration d’APIs.
  • Maîtrise de Git pour le versioning des développements.
  • Bonne compréhension de la modélisation des données : schéma en étoile, relations 1-N et N-N.
  • Connaissance des méthodes Agile et de Jira.
  • Connaissance de Palantir Foundry appréciée.
  • Anglais professionnel.
  • Bonne maîtrise des outils bureautiques pour la documentation et les présentations.
  • Autonomie, esprit d’analyse et capacité à travailler en équipe., Apache spark Anglais API Modélisation des données Gestion des données Git Reporting Création d’une base documentaire Logiciels bureautiques Python Autonomie Jira Esprit d’analyse Compte-rendu

Data Engineer - Python Spark & Intégration de Données H/F

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com
Prepare application

Good distractions

Loading talks and stories from around this role…