Ingénieur Big Data Hadoop H/F

Visian
France
16 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Expert
Experience required
6 years minimum
Working hours
Regular working hours
Languages
English

Tech stack

Agile Methodology Big Data Continuous Integration Apache Hadoop Hadoop Distributed File System Apache Hive Kerberos (Protocol) Cisco Nexus Switches Octopus Deploy Scrum Methodology Ansible Fortify (Software)
+13 more
SonarQube Apache Zookeeper Anaconda Cloudera Manager Apache Spark Gitlab Git Sentry Apache Kafka Terraform Ambari Jenkins Artifactory

Job description

Installation de cluster

  • Monitoring et administration des outils Big Data
  • Administration de cluster
  • Upgrade des distributions et des composants Hadoop
  • Installation des différents composants sur Hadoop
  • Support et résolution des problèmes N2 et N3
  • Mise en place d’environnements de développement et de test
  • Sécurisation des clusters

Outils & Environnement

  • Installation et configuration des différentes distributions sur Hadoop
  • Installation et configuration des composants : Zookeeper, HDFS, Spark, Hive, Kerberos, Sentry, Anaconda, Hue, Kafka…
  • Monitoring des clusters avec Ambari, Cloudera Manager, …
  • Administration des clusters : droits d’accès, Policy Ranger, création d’environnements…
  • CI/CD : Ansible, Jenkins, …
  • Méthodes agiles : Scrum, Safe, Kanban, …
  • Technologies complémentaires : Ansible Automation Platform, Digital.ai Release, ArgoCD, Terraform, Gitlab, Jenkins, Artifactory, SonarQube, Nexus Lifecycle, Fortify

Missions complémentaires

  • Conception et mise en oeuvre des architectures de production pour des solutions techniques spécifiques correspondant au besoin du client
  • Implémentation des outils de configuration et d’automatisation pour simplifier les process de déploiement et de mise à jour de la technologie
  • Design et implémentation de la solution dans les systèmes existants
  • Gestion de la capacité des environnements de production et anticipation des évolutions (capacity planning)
  • Alimentation du backlog des services de production (CI/CD, Continuous Operation, Time2fix, …) en complément des informations collectées auprès des ingénieurs OPS
  • Mise en oeuvre des bonnes pratiques et intégration continue : installation, configuration et divers paramétrages
  • Pilotage de la mise à niveau de la solution et gestion des impacts

Requirements

Profil recherchéUne expérience significative dans le cadre de projets Big Data sur une plateforme distribution Hadoop & CDPAnglais opérationnel et bonne aisance en communicationCapacité d’analyse et d’adaptationForce de proposition, la veille technologique6 ans et plus d’expérience dans l’environnement de la prestationConception et mise en oeuvre des architectures de production pour des solutions techniques spécifiquesImplémentation des outils de configuration et d’automatisation pour simplifier les process de déploiement et de mise à jourDesign et implémentation de la solution dans les systèmes existantsGestion de la capacité des environnements de production et anticipation des évolutions (capacity planning)Connaissance des technologies : Ansible Automation Platform, Digital.ai Release, ArgoCD, Terraform, Gitlab, Jenkins, Artifactory, SonarQube, Nexus lifecycle, FortifyMise en oeuvre des bonnes pratiques et intégration continuePilotage de la mise à niveau de la solution et gestion des impacts, 1. Une expérience significative dans le cadre de projets Big Data sur une plateforme distribution Hadoop & CDP

  1. Anglais opérationnel et bonne aisance en communication
  2. Capacité d’analyse et d’adaptation
  3. Force de proposition, la veille technologique
  4. 6 ans et plus d’expérience dans l’environnement de la prestation
  5. Conception et mise en oeuvre des architectures de production pour des solutions techniques spécifiques
  6. Implémentation des outils de configuration et d’automatisation pour simplifier les process de déploiement et de mise à jour
  7. Design et implémentation de la solution dans les systèmes existants
  8. Gestion de la capacité des environnements de production et anticipation des évolutions (capacity planning)
  9. Connaissance des technologies : Ansible Automation Platform, Digital.ai Release, ArgoCD, Terraform, Gitlab, Jenkins, Artifactory, SonarQube, Nexus lifecycle, Fortify
  10. Mise en oeuvre des bonnes pratiques et intégration continue
  11. Pilotage de la mise à niveau de la solution et gestion des impacts

EUR

Ansible Cluster Intégration continue Anglais Force de proposition Kanban Hadoop Git Méthodes d’amélioration OMQ Hive Veille technologique Jenkins Big data Scrum KAFKA Terraform SonarQube Nexus Automation Monitoring

Benefits & conditions

Taux journalier :Salaire selon profil

False

EducationalOccupationalCredential postgraduate degree EducationalOccupationalCredential bachelor degree

About the company

Le bénéficiaire souhaite une prestation d’accompagnement dans le cadre de la maintenance et la construction des plateformes Hadoop Cloudera (CDP). Il s’agit également d’un accompagnement au développement d’un ensemble des DATA Services, avec un challenge sur les fonctionnalités à développer et les standards de travail.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

6:21 min

Investigating push inefficiencies with upstream Git experts

Jonathan Creamer · Coffee With Developers

1:22 min

Overview of the Sentry error and performance monitoring platform

Priscila Oliveira · WWC 2023

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

56 sec

Favorite git commands and the importance of patch commits

Eileen Uchitelle Eileen Uchitelle +1 · Coffee With Developers

1:06 min

Developer experience and project variety at scale

Alexandra Petri · WWC 2023

3:21 min

Installing and configuring the Sentry JavaScript SDK for applications

Priscila Oliveira · WWC 2023

Videos

See all

Related articles

See all