Data Engineer senior python/ API/ Big Data/ AWS/ Linux / Energie (H/F)

Octopus Group
Canton of Courbevoie-2, France
9 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
French
Experience level
Senior

Job location

Canton of Courbevoie-2, France

Tech stack

API
Artificial Intelligence
Airflow
Amazon Web Services (AWS)
Big Data
Cloud Computing
Cluster Analysis
Code Review
Continuous Integration
Information Engineering
Data Warehousing
Relational Databases
Linux
DevOps
Hadoop
Hadoop Distributed File System
Python
NoSQL
Query Optimization
Amazon Web Services (AWS)
SQL Databases
Tableau
Flask
Spark
Gitlab
GIT
Gitlab-ci
GraphQL
Machine Learning Operations
Dataiku
Api Gateway
Amazon Web Services (AWS)
Terraform
Docker
Alteryx

Job description

Participer au développement des assets de la nouvelle plateforme de données.

Participer au cadrage et au lancement des projets d'ingénierie et d?intelligence artificielle.

Prise en main des sujets pilotes et d?assurer le Run

La conception, la modélisation et l?optimisation des requêtes Redshift est un point clé dans cette mission

Missions : Vous participer à la construction de la data plateforme dans sa deuxième phase permettant de consolider le socle et mettre à disposition les moyens technique pour exploiter la donnée

Vous participez à l?étude opérationnelle de cadrage et d?architecture en anticipant les différentes contraintes avec les référents de l?équipe.

Vous serez amené à réaliser des POC et de spiker le backlog.

Vous complétez l?équipe avec vos compétences en ingénierie de données et en développement (scripting python, d?expertise sur les API, les tests, les bonnes pratiques, etc.)

Vous consacrer votre temps à travailler avec un squad Data Métier, de proposer des solutions technique pour les clients associé, d?assurer le Run et de développer la plateforme associée, et, ce, toute en respectant les consignes d?architecture

Participer à la mise en place des projets d?AI engineering - Savoir maîtriser les coûts des services est un Must pour ce poste et être force de proposition

Requirements

Un minimum de 5 ans d'expérience dans le domaine de la Data engineering ou équivalent

Diplôme d?ingénieur dans un domaine orienté Data ou équivalent

Une première expérience dans le domaine des services énergétique est une préférence

Excellentes compétences en Configurations linux et les liaisons des outils et/ou des pipelines

Savoir benchmarker les solutions technique

Test sur les valeurs extrêmes et les limites des solutions

Excellentes Compétences sur le Cloud : AWS (Redshift, RDS, Lambda, SQS, SNS, Api Gateway, etc.), GCP

Excellentes compétences en DEV : Python, API (Fast ou Flask), GraphQL, Airflow, Linux, Git (Code review, Merge Request, etc.), Docker

Excellentes compétences DevOps : Docker, Terraform, CI/CD, Gitlab, Gitlab CI, etc.

excellentes compétences DATA : BDD, SGBDR, DataWarehouse,SQL, NOSQL et BIGDATA : HDFS, SPARK, Hadoop, etc.

Data Science (Modélisation, MLOPS)

Notions : Scalabilité, Clustering, Data Mesh, Data Virt, Data Qualité, etc.

Analytique : Tableau, Dataiku, Alteryx, etc.

Apply for this position