Data Engineer Spark Scala H/F

Linuxconfirméscalaconfirmémésosconfirmégitconfirméoracleconfirméoozieconfirméshellconfirméhdfsconfirmé

Nanterre, France

5 days ago

Apply on www.hellowork.com

Prepare application

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Experience level

Expert

Experience required

5 years minimum

Working hours

Regular working hours

Job source

www.hellowork.com

Tech stack

Java (Programming Language) Big Data Unix Apache Hadoop Hadoop Distributed File System Apache Hive JSON MongoDB Apache Oozie Oracle (Applications) Cloudera Scala (Programming Language)

+10 more

Test Case WebKit Parquet Apache Yarn Apache Spark Git Data Lakes Avro Apache Kafka Spark Streaming

Job description

Sur le périmètre confié au sein de l’équipe de Gestion Courante Datalake :

Assurer le suivi des traitements quotidien en Spark/Scala
Analyser, corriger les incidents fonctionnels confiés avec leurs éventuelles reprises de données afférentes
Réaliser les évolutions confiées
Tester les corrections d’incidents ou autres développements
Mettre à jour la documentation
Livrer en production les corrections ou autres développements
Rendre compte à son chef de projet

Livrables

Spécifications des corrections ou autres développements dans le respect des délais et des charges définis avec son chef de projet
Plan et cas de tests
Mises à jour de la documentation
Mise à jour du suivi interne de l’équipe

Un bon relationnel et une qualité rédactionnelle sont demandées.

Requirements

Une expérience de gestion courante applicative est incontournable.

Une connaissance d’Oracle est nécessaire.

Vous maîtrisez les nouvelles technologies BIG DATA, avec une expérience >5 ans sur des technologies SPARK & SCALA :

HADOOP/ SPARK / HIVE / HDFS / YARN / OOZIE / Parquet / KAFKA / spark streaming, Mongo DB /JSON / AVRO
Les outils et langages suivants : Cloudera, Java, Scala, Git

Une connaissance de contexte technologique similaire est nécessaire.

Une connaissance de GCP serait également appréciée., Profil recherchéCompétencesNiveau de compétenceopconÉlémentairehiveConfirmésparkConfirméunix / linuxConfirméscalaConfirméMÉSOSConfirmégitConfirméORACLEConfirméoozieConfirméshellConfirméHDFSConfirmé

Mais aussi…

Taux journalier :580.css-11k7fwb{display:inline-block;white-space:nowrap;vertical-align:middle;-webkit-padding-start:var(–chakra-space-1-5);padding-inline-start:var(–chakra-space-1-5);-webkit-padding-end:var(–chakra-space-1-5);padding-inline-end:var(–chakra-space-1-5);text-transform:none;font-size:var(–chakra-fontSizes-xs);border-radius:var(–chakra-radii-md);font-weight:var(–chakra-fontWeights-semibold);background:var(–chakra-colors-success-200);color:var(–chakra-colors-success-700);box-shadow:var(–badge-shadow);padding:4px 6px;–badge-bg:var(–chakra-colors-success-100);–badge-color:colors.success.800;}.chakra-ui-dark .css-11k7fwb:not([data-theme]),[data-theme=dark] .css-11k7fwb:not([data-theme]),.css-11k7fwb[data-theme=dark]{–badge-bg:rgba(226, 243, 232, 0.16);–badge-color:var(–chakra-colors-success-200);}Cette offre est à 0% de commission .css-74lrwu{width:1em;height:1em;line-height:1em;-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;color:currentColor;font-size:16px;display:-webkit-box;display:-webkit-flex;display:-ms-flexbox;display:flex;-webkit-transition:.1s ease-in-out color;transition:.1s ease-in-out color;}.css-74lrwu *{-webkit-transition:.1s ease-in-out fill;transition:.1s ease-in-out fill;fill:var(–chakra-colors-rythm-600);}, git

Confirmé

ORACLE

Confirmé

oozie

Confirmé

shell

Confirmé

HDFS

Confirmé

EUR

Scala Hadoop Shell Oracle Git Hive KAFKA JSON, UNIX