Data Engineer Hadoop - Pyspark H/F

AS International Group
Paris, France
11 days ago
Apply on www.hellowork.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Experienced
Experience required
3 years minimum
Working hours
Regular working hours
Languages
English

Tech stack

Application Programming Interfaces (APIs) Agile Methodology JIRA BigQuery Unix Linux DevOps Apache Hadoop Apache Hive Python (Programming Language) Unix Shell Scrum Methodology
+9 more
Standard Sql Shell Script SQL Databases Scripting Google Cloud Git Pyspark Jenkins Alteryx

Job description

Nous recherchons actuellement des Ingénieurs de Production H/F afin d’intégrer nos différents clients grands comptes situés à La Défense, Montreuil, et Paris intramuros.

Nous recherchons un Data Engineer Hadoop / PySpark avec 3 à 5 ans d’expérience pour rejoindre nos équipes et contribuer aux évolutions de notre datalake.

Vous travaillerez en étroite collaboration avec les équipes Production Applicative et DevOps, dans un environnement international et Agile, afin de mettre en oeuvre les évolutions techniques du datalake et répondre aux besoins métier.

Les missions :

  • Mettre en oeuvre de nouvelles ingestions de données et traitements de transformation / data preparation
  • Maintenir et faire évoluer les pipelines de données avec PySpark et Shell scripting
  • Participer aux évolutions techniques de la plateforme en collaboration avec les équipes DevOps
  • Analyser et résoudre des problématiques techniques complexes
  • Rédiger des spécifications techniques
  • Être force de proposition sur les solutions et technologies à mettre en oeuvre

Environnement technique :

  • Hadoop, PySpark, Python, Hive, SQL, Shell Unix/Linux, Git, Jenkins, Jira

  • La connaissance de Indexima, Alteryx, Altair, GCP / BigQuery et des bibliothèques Python orientées API est un plus.

Requirements

3 à 5 ans d’expérience en Data EngineeringTrès bonne maîtrise de Hadoop / PySparkSolides compétences en Python, Hive et SQLExpérience dans un environnement Agile / ScrumAutonomie, rigueur et capacité d’analyseExcellent relationnel et goût du travail en équipeCuriosité technique et capacité à être force de propositionAnglais professionnel, à l’écrit comme à l’oral, pour collaborer notamment avec nos équipes basées à Porto, * 3 à 5 ans d’expérience en Data Engineering

  • Très bonne maîtrise de Hadoop / PySpark
  • Solides compétences en Python, Hive et SQL
  • Expérience dans un environnement Agile / Scrum
  • Autonomie, rigueur et capacité d’analyse
  • Excellent relationnel et goût du travail en équipe
  • Curiosité technique et capacité à être force de proposition
  • Anglais professionnel, à l’écrit comme à l’oral, pour collaborer notamment avec nos équipes basées à Porto, Anglais Force de proposition Google cloud platform Hadoop Shell SQL Git Sens du relationnel Hive Travail en équipe Jenkins Python Autonomie Jira Scripting UNIX Esprit d’analyse

About the company

AS International Group, société de conseil et de solutions innovantes en informatique, se positionne aujourd’hui comme le partenaire incontournable des grands comptes et PME, dans leur stratégie de transformation digitale., AS International Group, société de conseil et de solutions innovantes en informatique, se positionne aujourd’hui comme le partenaire incontournable des grands comptes et PME, dans leur stratégie de transformation digitale. Nous recherchons actuellement des Ingénieurs de Production H/F afin d’intégrer nos différents clients grands comptes situés à La Défense, Montreuil, et Paris intramuros.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com
Prepare application

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

6:21 min

Investigating push inefficiencies with upstream Git experts

Jonathan Creamer · Coffee With Developers

3:05 min

Integrating an assistant application with Jira software

Felix Augenstein · LIVE

2:03 min

Microsoft integrating native Unix coreutils into Windows environments

Chris Heilmann +2 · LIVE

1:50 min

Evaluating the strategic benefits of hiring African developers

Mark Schaub Mark Schaub · World Congress 2024

56 sec

Favorite git commands and the importance of patch commits

Eileen Uchitelle Eileen Uchitelle +1 · Coffee With Developers

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

Videos

See all

Related articles

See all