Data Engineer F/H
Role details
Job location
Tech stack
Job description
Big Data, Data Science, Data analyse, Data architecture, ... Ça n'a pas de secret pour vous ? Que vous commenciez votre carrière professionnelle ou que vous soyez spécialiste de l'une de ces disciplines, intégrer notre communauté Data, c'est l'assurance de progresser, innover, partager, vous certifier et rendre service à nos clients.
Afin d'accompagner notre client du secteur public dans la mise en place d'une plate-forme de type « Data Fabrique », nous recherchons des candidats ayant un profil de Data Ingénieur expérimenté. La mission consiste à accompagner la migration d'applications existantes dans une nouvelle architecture orientée « Big Data ».
Fonctions et responsabilités La mission consiste à intégrer une équipe projet dans la mise en œuvre d'applicatifs métier dans la nouvelle architecture de type Big Data et la réalisation de nouvelles applications ou la migration d'applications existantes vers cette nouvelle architecture.
- Conseil, Audit et Maitrise d'œuvre
- Études d'opportunité, cadrage de projet d'intégration de données et aide au choix de solution
- Accompagnement à la mise en place de Data Lake / Big Data.
- Accompagnement de profil junior.
- Conception et développement de flux d'intégration des données (ETL, ELT, streaming , API ...)
- Conception et mise en œuvre de plateformes On Premise ou Cloud de stockage des données dans un Data Lake (Big Data)
- Mise en place de platefome Cloud (OVH, AWS, Azure, GCP, OutScale etc.)
- Migration des données
- Move to Cloud, Votre travail crée de la valeur. Vous élaborerez des solutions novatrices et développerez des relations durables avec vos collègues et clients, tout en ayant accès à des capacités mondiales pour concrétiser vos idées, saisir de nouvelles opportunités, et bénéficier d'une expertise sectorielle et technologique de pointe.
Vous ferez évoluer votre carrière en vous joignant à une entreprise bâtie pour croître et durer. Vous serez soutenus par des leaders qui ont votre santé et bien-être à cœur et qui vous permettront de saisir des occasions afin de parfaire vos compétences et élargir les horizons.
Joignez-vous à nous, l'une des plus importantes entreprises de conseil en technologie de l'information (TI) et en management au monde.
Requirements
Qualités requises pour réussir dans ce rôle Langages : python, Spark, Pyspark SQL Travaux en mode projet « Agile » Bonne qualité rédactionnelle Rigoureux Capacité à s'intégrer rapidement dans une équipe Capacité à travailler dans un contexte projet exigeant avec un planning de réalisation « tendu »
Autres informations sur l'environnement technique (compétences souhaitées) : Framework de transformation : Hadoop, Spark Langage : scala Stockage objet (S3 / Minio) Traitement distribué (Spark, Dremio) sur cluster OpenShift DataViz : DigDash Autres : DBT, Airflow, Nifi, Keycloack, … Contexte technique des sources de données :
- Bases de données Oracle et PostgreSQL
- Cluster Hadoop : HDFS, Hive, Kerberos
- BDD OpenSearch
Benefits & conditions
- Télétravail : possibilité de télétravailler jusqu'à 3 jours/semaine.
- Transports : prise en charge à 100%.
- Tickets restaurants : en complément de votre salaire.
- Epargne salariale et actionnariat : participation aux bénéfices, plan épargne d'entreprise, régime d'achat d'actions.
Label Recrutement Inclusif