Data Engineer Confirmé H/F
Role details
Job location
Tech stack
Job description
Développer et livrer de nouvelles fonctionnalités et user stories, priorisées avec la squad
- Respecter les règles de gestion et critères d'acceptation associés à chaque développement
- Concevoir des traitements Spark (streaming et batch) sur la stack Hadoop Cloudera (HDFS, Hive, HBase, Phoenix)
- Développer et exposer des API en Scala et Java, avec les données via Kafka
- Mettre en place et exécuter des tests automatisés (XRAY, JUnit) dans une logique de craftmanship
- Garantir le déploiement et le bon fonctionnement des applications en production via GitLab CI/CD, Jenkins, Artifactory
- Superviser la qualité et la performance grâce à SonarQube, ELK, Grafana
- Conseiller et accompagner les autres membres de la squad sur les pratiques de développement et de qualité
Requirements
De formation supérieure (Bac +5), tu as au moins 4 à 7 ans d'expérience en tant que Data Engineer.Maîtrise de Spark (streaming et batch), Kafka, Scala et JavaBonne connaissance de l'écosystème Hadoop (HDFS, Hive, HBase, Phoenix)À l'aise avec les outils DevOps (GitLab CI/CD, Jenkins, Artifactory) et de monitoring (SonarQube, ELK, Grafana)Expérience du développement d'API et des bonnes pratiques de tests automatisésEnvie constante d'apprendre et bonne intelligence collectivePugnace, orienté(e) solutions et force de proposition, De formation supérieure (Bac +5), tu as au moins 4 à 7 ans d'expérience en tant que Data Engineer.
- Maîtrise de Spark (streaming et batch), Kafka, Scala et Java
- Bonne connaissance de l'écosystème Hadoop (HDFS, Hive, HBase, Phoenix)
- À l'aise avec les outils DevOps (GitLab CI/CD, Jenkins, Artifactory) et de monitoring (SonarQube, ELK, Grafana)
- Expérience du développement d'API et des bonnes pratiques de tests automatisés
- Envie constante d'apprendre et bonne intelligence collective
- Pugnace, orienté(e) solutions et force de proposition
EUR
Scala Force de proposition ELK API Hadoop Grafana Git Hive JUnit Batching Jenkins Scrum KAFKA SonarQube Java