Data Engineer Hadoop - Pyspark H/F

Celad
Paris, France
17 days ago
Apply on www.hellowork.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Experienced
Experience required
3 years minimum
Working hours
Regular working hours
Languages
English

Tech stack

Application Programming Interfaces (APIs) Agile Methodology JIRA BigQuery Unix Data Transformation DevOps Apache Hadoop Apache Hive Python (Programming Language) Scrum Methodology Standard Sql
+10 more
Shell Script SQL Databases Scripting Data Server Interface Google Cloud Git Data Lakes Pyspark Jenkins Alteryx

Job description

15 jours de RTT (100% “salarié” & Rachat à 125%)

  • Participation aux bénéfices

  • Indemnité de déplacement (6€ net / jour OU 50% du titre de transport)

  • Des titres restaurants d’une valeur de 11€ / jour travaillé

  • Plan Epargne Entreprise

  • Prime de vacances

  • Avance sur salaire

NOTRE PROCESSUS DE RECRUTEMENT :

1/ Vous postulez : chaque CV est lu (pas de filtre automatique chez nous !)

2/ Premier contact : un coup de fil rapide pour voir si on part sur de bonnes bases

3/ Premier entretien : on parle de vous, de vos compétences, de vos projets et on vous ouvre les coulisses de CELAD

4/ Rencontre Business Manager : on plonge dans le concret, la mission, l’équipe, les défis…, Nous recherchons un(e) Data Engineer Hadoop / PySpark pour intervenir au sein de la DSI d’un grand groupe bancaire, sur l’évolution et le maintien d’une plateforme Data stratégique.

Vous intégrerez un environnement dynamique et travaillerez en lien avec les équipes Production Applicative et DevOps afin de mettre en oeuvre les évolutions techniques du Data Lake., Mettre en oeuvre de nouvelles ingestions de données et traitements de Data Preparation / Data Transformation.

  • Développer, maintenir et faire évoluer les pipelines de données en Python / PySpark et Shell Scripting.
  • Participer aux évolutions et à l’optimisation du Data Lake Hadoop.
  • Collaborer avec les équipes Production et DevOps sur les évolutions de la plateforme.
  • Rédiger les spécifications techniques associées aux évolutions.
  • Participer à la résolution de problématiques techniques complexes.
  • Contribuer à l’amélioration continue des outils et des processus Data.
  • Travailler dans un environnement Agile / Scrum et avec des équipes internationales.

Requirements

Vous justifiez idéalement de 3 à 6 ans d’expérience en tant que Data Engineer, avec une solide expertise dans le traitement et la transformation de données.Compétences indispensables :HadoopPython / PySparkHiveSQLShell Scripting sous Unix / LinuxGitJenkinsJiraMéthodologie Agile / ScrumAnglais professionnel, écrit et oralLes compétences suivantes seraient un plus :IndeximaAlteryxAltairGCP / BigQueryBibliothèques Python orientées APIAu-delà de vos compétences techniques, nous recherchons une personne autonome, analytique, curieuse et force de proposition, capable de travailler efficacement en équipe dans un environnement en constante évolution. Informations complémentairesLocalisation : ParisExpérience : 3 à 6 ansEnvironnement technique : Hadoop, Python, PySpark, Hive, SQL, Unix/LinuxAnglais professionnel : indispensableVous êtes passionné(e) par la Data Engineering, maîtrisez Hadoop et PySpark et souhaitez intervenir sur des projets Data à, Vous justifiez idéalement de 3 à 6 ans d’expérience en tant que Data Engineer, avec une solide expertise dans le traitement et la transformation de données.

Compétences indispensables :

  • Hadoop
  • Python / PySpark
  • Hive
  • SQL
  • Shell Scripting sous Unix / Linux
  • Git
  • Jenkins
  • Jira
  • Méthodologie Agile / Scrum
  • Anglais professionnel, écrit et oral

Les compétences suivantes seraient un plus :

  • Indexima
  • Alteryx
  • Altair
  • GCP / BigQuery
  • Bibliothèques Python orientées API

Au-delà de vos compétences techniques, nous recherchons une personne autonome, analytique, curieuse et force de proposition, capable de travailler efficacement en équipe dans un environnement en constante évolution., * Environnement technique : Hadoop, Python, PySpark, Hive, SQL, Unix/Linux

  • Anglais professionnel : indispensable

Vous êtes passionné(e) par la Data Engineering, maîtrisez Hadoop et PySpark et souhaitez intervenir sur des projets Data à forts enjeux ? N’attendez plus, postulez !

EUR

Anglais Force de proposition API Google cloud platform Hadoop Shell SQL Git Méthodes agiles Hive Jenkins Python Scrum Jira Amélioration continue Scripting UNIX

About the company

Bienvenue chez CELAD - L’ingénierie à visage humain

Depuis 1990, CELAD accompagne la transformation digitale des entreprises, en conjuguant innovation technologique et proximité humaine. D’abord ancrés dans le monde bancaire, nous sommes aujourd’hui une ESN de référence dans les Systèmes d’Information et l’Informatique Industrielle, forte de plus de 1750 collaborateurs passionnés et engagés.

Nous collaborons avec plus de 250 clients, des PME dynamiques aux Grands Groupes ambitieux, dans des secteurs aussi variés que la banque, l’assurance, la mobilité, l’énergie ou encore l’industrie.

Notre mission ?

  • Accompagner les entreprises dans leur transformation numérique,
  • Le faire avec passion, engagement et respect,
  • En mettant toujours l’humain au coeur du projet.

Une présence forte en région : focus sur CELAD-Paris

Implantée au centre du premier bassin tech et business français, CELAD Paris accompagne ses consultants sur des projets IT à fort enjeu en Île-de-France.

Nos consultants interviennent chez des clients grands comptes et acteurs majeurs de la banque, de l’assurance, du transport, de l’industrie ou encore de la Défense., Parce qu’on ne cherche pas simplement des CV. Parce qu’au-delà des projets, ce sont les relations humaines qui font notre force.

Chez CELAD, le management de proximité n’est pas une promesse, mais un engagement au quotidien : accompagnement individualisé, suivi régulier, perspectives d’évolution réelles… et surtout une équipe qui vous connaît et vous soutient., Bienvenue chez CELAD - L’ingénierie à visage humainDepuis 1990, CELAD accompagne la transformation digitale des entreprises, en conjuguant innovation technologique et proximité humaine. D’abord ancrés dans le monde bancaire, nous sommes aujourd’hui une ESN de référence dans les Systèmes d’Information et l’Informatique Industrielle, forte de plus de 1750 collaborateurs passionnés et engagés.Nous collaborons avec plus de 250 clients, des PME dynamiques aux Grands Groupes ambitieux, dans des secteurs aussi variés que la banque, l’assurance, la mobilité, l’énergie ou encore l’industrie. Notre mission ?- Accompagner les entreprises dans leur transformation numérique,- Le faire avec passion, engagement et respect,- En mettant toujours l’humain au coeur du projet. Une présence forte en région : focus sur CELAD-Paris Implantée au centre du premier bassin tech et business français, CELAD Paris accompagne ses consultants sur des projets IT à fort enjeu en Île-de-France.Nos consultants interviennent chez des clients grands comptes et acteurs majeurs de la banque, de l’assurance, du transport, de l’industrie ou encore de la Défense. Pourquoi nous rejoindre ? Parce qu’on ne cherche pas simplement des CV.Parce qu’au-delà des projets, ce sont les relations humaines qui font notre force. Chez CELAD, le management de proximité n’est pas une promesse, mais un engagement au quotidien : accompagnement individualisé, suivi régulier, perspectives d’évolution réelles… et surtout une équipe qui vous connaît et vous soutient. Avantages à la clé :- 15 jours de RTT (100% “salarié” & Rachat à 125%)- Participation aux bénéfices- Indemnité de déplacement (6€ net / jour OU 50% du titre de transport)- Des titres restaurants d’une valeur de 11€ / jour travaillé - Plan Epargne Entreprise- Prime de vacances- Avance sur salaire NOTRE PROCESSUS DE RECRUTEMENT :1/ Vous postulez : chaque CV est lu (pas de filtre

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com
Prepare application

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

6:21 min

Investigating push inefficiencies with upstream Git experts

Jonathan Creamer · Coffee With Developers

3:05 min

Integrating an assistant application with Jira software

Felix Augenstein · LIVE

2:03 min

Microsoft integrating native Unix coreutils into Windows environments

Chris Heilmann Chris Heilmann +2 · LIVE

1:34 min

Bringing diverse skills to industrial data science roles

Katja Träumner

56 sec

Favorite git commands and the importance of patch commits

Eileen Uchitelle Eileen Uchitelle +1 · Coffee With Developers

Videos

See all

Related articles

See all