Expertise Technique HADOOP F/H
Redopus
Canton of Pessac-2, France
yesterday
Role details
Contract type
Permanent contract Employment type
Full-time (> 32 hours) Working hours
Regular working hours Languages
French Experience level
SeniorJob location
Canton of Pessac-2, France
Tech stack
Big Data
Cloudera Impala
Databases
IBM InfoSphere DataStage
Hadoop
Hadoop Distributed File System
Hive
IBM InfoSphere (ETL Tools)
Python
PostgreSQL
Red Hat Enterprise Linux - RHEL
Power BI
Ansible
Standard Sql
Cloudera
SAS (Software)
Shell Script
Data Streaming
Teradata
Apache Zookeeper
Apache Yarn
Cloudera Manager
Spark
Kubernetes
Kafka
VMware
Job description
Assurer le maintien en conditions opérationnelles (MCO) des plateformes Hadoop Cloudera et participer aux projets d'évolution des infrastructures Data., 1. Administration et exploitation Hadoop
- Administrer les clusters Hadoop Cloudera (Prod et Hors Prod).
- Superviser les infrastructures et assurer leur disponibilité.
- Gérer les incidents et les problèmes techniques.
- Optimiser les performances des plateformes.
- Capacity Planning
- Suivre les capacités des infrastructures.
- Mettre en place des outils et procédures de suivi.
- Anticiper les besoins d'évolution.
- Maintenance et évolution
- Appliquer les correctifs et mises à jour.
- Assurer une veille technologique.
- Participer aux montées de version et migrations.
- Support et expertise
- Accompagner les équipes études et exploitation.
- Fournir une expertise technique sur les problématiques Big Data.
- Participer aux diagnostics complexes.
- Projets techniques
- Concevoir des architectures techniques.
- Piloter ou contribuer aux projets d'évolution.
- Participer aux évolutions logicielles, matérielles et de sécurité.
- Documentation et gouvernance
- Rédiger les procédures d'administration et d'exploitation.
- Produire les dossiers d'architecture.
- Assurer les transferts de connaissances.
- Exploitation opérationnelle
- Gestion des incidents, demandes et changements.
- Reporting hebdomadaire et tableaux de bord mensuels.
- Participation aux astreintes et interventions HNO si nécessaire.
Requirements
Expérience
- 5 à 10 ans minimum dans l'administration de plateformes Big Data.
- Solide expérience sur Hadoop Cloudera en environnement de production.
Compétences techniques requises
Big Data (Expert)
Cloudera CDP 7.1.9 / 7.3.x
- HDFS
- YARN
- Cloudera Manager
- Hive
- Hue
- Impala
- Spark
- Zeppelin
- Ranger
- Knox
- ZooKeeper
- Iceberg
Développement
- Shell scripting
- Python
- Spark
Requêtage
- SQL
- HiveQL
- Impala
Systèmes
- Linux RedHat
Environnement Data
- Teradata
- DataStage
- Power BI
- SAS
Bases de données
- PostgreSQL
Data Streaming
- Kafka
- IBM InfoSphere CDC
Infrastructure
- Kubernetes
- Ansible
- VMware
- Linux RedHat