Data Engineer F/H

O2max
Canton of Rennes-4, France
3 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
French
Experience level
Senior
Compensation
€ 50K

Job location

Canton of Rennes-4, France

Tech stack

Google BigQuery
ETL
Hadoop
Python
RabbitMQ
Cloudera
SQL Databases
SQLAlchemy
Data Streaming
Snowflake
PySpark
Kubernetes

Job description

Dans le cadre d'un projet de modernisation de la plateforme data, nous recherchons un Data Engineer confirmé pour accompagner la migration d'un environnement Cloudera vers Snowflake.

Le consultant interviendra sur la conception, le développement et l'industrialisation de flux de données, au sein d'un environnement technique exigeant.

Missions principales

  • Participer à la migration de la plateforme data de Cloudera vers Snowflake.
  • Concevoir, développer et optimiser des pipelines de données.
  • Mettre en œuvre des traitements ETL / ELT fiables et maintenables.
  • Développer des scripts et traitements en Python.
  • Manipuler et transformer les données avec SQL.
  • Contribuer à la supervision, aux tests et à la documentation des flux.
  • Collaborer avec les équipes data, techniques et métier.
  • Participer à l'amélioration continue des pratiques d'industrialisation.

Requirements

Python

  • SQL
  • ETL / ELT

Compétences appréciées :

  • BigQuery

  • Snowflake

  • Kubernetes

  • RabbitMQ

  • Hadoop

  • PySpark

  • Profil confirmé disposant de minimum 3 ans d'expérience en Data Engineering.

  • Bonne maîtrise de Python et SQL.

  • Expérience significative sur des flux ETL / ELT.

  • Capacité à évoluer dans des environnements data complexes.

  • Une connaissance de Snowflake ou des plateformes cloud data serait un plus.

  • Autonomie dans la prise en charge des sujets techniques.

  • Rigueur dans la conception, les tests et la documentation.

  • Bon esprit d'analyse et capacité à travailler avec des équipes pluridisciplinaires.

Apply for this position