Administrateur DevOps Cloudera H/F

Dans le cadre de l’exploitation et du maintien en conditions opérationnelles d’une plateforme Cloudera Data Platform / Cloudera Data Platform Private Cloud, le client recherche un Administrateur DevOps Cloudera capable d’assurer l’administration technique de la plateforme, son exploitation quotidienne, son automatisation et son évolution.

La mission s’inscrit dans un environnement de production critique avec des enjeux de disponibilité, performance, sécurité, industrialisation et observabilité.

Missions principales

Administration et exploitation Cloudera

• Administrer et maintenir les environnements Cloudera CDP / CDH.

• Exploiter les principaux composants de l’écosystème :

• HDFS
• YARN
• Hive / Impala
• HBase
• Kafka
• Spark
• ZooKeeper
• Ranger
• Atlas
• Cloudera Manager
• Assurer les opérations courantes : démarrage/arrêt, contrôle des services, gestion des configurations et des ressources.
• Réaliser les montées de version, patchs et opérations de maintenance.
• Administrer les capacités de stockage, quotas, files YARN et ressources des clusters.

Maintien en conditions opérationnelles

• Superviser la disponibilité et les performances des clusters.
• Analyser les alertes, logs et métriques techniques.
• Diagnostiquer et résoudre les incidents de niveau N2/N3.
• Réaliser les analyses de causes racines et contribuer aux plans d’actions.
• Participer à la gestion des problèmes, changements et opérations planifiées.
• Garantir le respect des procédures d’exploitation et engagements de service.

DevOps et automatisation

• Industrialiser les opérations d’administration et d’exploitation.
• Développer et maintenir des scripts d’automatisation en Python, Shell/Bash ou Ansible.
• Construire et maintenir les pipelines CI/CD associés aux composants plateforme.

• Automatiser :

• déploiements ;
• contrôles de conformité ;
• patching ;
• provisioning ;
• sauvegardes/restaurations ;
• contrôles de santé des clusters.
• Participer à la mise en oeuvre des pratiques Infrastructure as Code.

Sécurité

• Administrer les mécanismes d’authentification et d’autorisation.
• Gérer les droits et politiques via Ranger.

• Participer à l’intégration avec :

• LDAP / Active Directory ;
• Kerberos ;
• certificats TLS.
• Appliquer les règles de durcissement et de sécurité de la plateforme.
• Contribuer au traitement des vulnérabilités et recommandations de sécurité.

Performance et capacité

• Analyser les consommations CPU, mémoire, stockage et réseau.
• Identifier les traitements ou services consommateurs.
• Optimiser les performances Hadoop / Spark / Hive / Impala.

• Participer au capacity planning et à l’évolution des infrastructures., Activités et livrables attendus

• Documentation d’exploitation et procédures techniques.
• Scripts et playbooks d’automatisation.
• Tableaux de bord de supervision et capacité.
• Comptes rendus d’incidents et analyses RCA.
• Plans de remédiation et d’amélioration continue.
• Dossiers de changement et procédures de mise en production.
• Mise à jour des référentiels techniques et procédures d’exploitation.

Environnement technique

Cloudera

• Cloudera Data Platform - CDP
• Cloudera Manager
• CDH selon environnement
• HDFS / YARN
• Hive / Impala
• Spark
• Kafka
• HBase, Ansible
• Git / GitLab
• Jenkins / GitLab CI
• Terraform selon environnement
• Python
• Shell / Bash
• APIs REST

Supervision / Observabilité

• Cloudera Manager
• Prometheus / Grafana
• Elastic / Splunk
• Centreon ou outils équivalents, Profil recherchéCompétences recherchéesCompétences techniquesBonne maîtrise de l’administration Linux.Expérience significative sur l’administration de plateformes Cloudera / Hadoop.Bonne connaissance des architectures distribuées Big Data.Maîtrise de Cloudera Manager.Connaissances solides de HDFS, YARN, Hive, Impala et Spark.Connaissance de Kafka appréciée.Maîtrise des outils d’automatisation et des pratiques DevOps.Capacité à analyser des incidents complexes à partir des logs et métriques.Connaissance des mécanismes Kerberos, LDAP, TLS et Ranger.Compétences comportementalesForte capacité d’analyse et de diagnostic.Autonomie dans la résolution d’incidents.Rigueur et respect des processus de production.Capacité à documenter et industrialiser les opérations.Bon relationnel avec les équipes infrastructure, Data, sécurité et développement.Capacité à intervenir dans un environnement de production critique.Profil recherchéFormation Bac +3 à Bac +5 en informatique ou équivalent.3 à 5 ans minimum d’expérience en administration systèmes / Big Data / DevOps.Une expérience significative sur Cloudera en environnement de production est fortement souhaitée.Une expérience en exploitation N2/N3 ou services managés constitue un plus.

Mais aussi…

Taux journalier :450.css-11k7fwb{display:inline-block;white-space:nowrap;vertical-align:middle;-webkit-padding-start:var(–chakra-space-1-5);padding-inline-start:var(–chakra-space-1-5);-webkit-padding-end:var(–chakra-space-1-5);padding-inline-end:var(–chakra-space-1-5);text-transform:none;font-size:var(–chakra-fontSizes-xs);border-radius:var(–chakra-radii-md);font-weight:var(–chakra-fontWeights-semibold);background:var(–chakra-colors-success-200);color:var(–chakra-colors-success-700);box-shadow:var(–badge-shadow);padding:4px 6px;–badge-bg:var(–chakra-colors-success-100);–badge-color:colors.success.800;}.chakra-ui-dark .css-11k7fwb:not([data-theme]),[data-theme=dark] .css-11k7fwb:not([data-theme]),.css-11k7fwb[data-theme=dark]{–badge-bg:rgba(226, 243, 232, 0.16);–badge-color:var(–chakra-colors-success-200);}Cette offre est à 0% de commission .css-74lrwu{width:1em;height:1em;line-height:1em;-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;color:currentColor;font-size:16px;display:-webkit-box;display:-webkit-flex;display:-ms-flexbox;display:flex;-webkit-transition:.1s ease-in-out color;transition:.1s ease-in-out color;}.css-74lrwu *{-webkit-transition:.1s ease-in-out fill;transition:.1s ease-in-out fill;fill:var(–chakra-colors-rythm-600);}, * Bonne maîtrise de l’administration Linux.

• Expérience significative sur l’administration de plateformes Cloudera / Hadoop.
• Bonne connaissance des architectures distribuées Big Data.
• Maîtrise de Cloudera Manager.
• Connaissances solides de HDFS, YARN, Hive, Impala et Spark.
• Connaissance de Kafka appréciée.
• Maîtrise des outils d’automatisation et des pratiques DevOps.
• Capacité à analyser des incidents complexes à partir des logs et métriques.
• Connaissance des mécanismes Kerberos, LDAP, TLS et Ranger.

Compétences comportementales

• Forte capacité d’analyse et de diagnostic.
• Autonomie dans la résolution d’incidents.
• Rigueur et respect des processus de production.
• Capacité à documenter et industrialiser les opérations.
• Bon relationnel avec les équipes infrastructure, Data, sécurité et développement.
• Capacité à intervenir dans un environnement de production critique., * Formation Bac +3 à Bac +5 en informatique ou équivalent.
• 3 à 5 ans minimum d’expérience en administration systèmes / Big Data / DevOps.
• Une expérience significative sur Cloudera en environnement de production est fortement souhaitée.
• Une expérience en exploitation N2/N3 ou services managés constitue un plus.

EUR

LDAP Ansible Administration système et réseau Prometheus Bash API Contrôle qualité Hadoop Shell Linux Grafana Git Analyse des causes Hive Jenkins Kubernetes Big data Python Autonomie KAFKA