Architecte Big Data Hadoop - Cloudera H/F
Role details
Job location
Tech stack
Job description
Au sein de l'organisation de la Direction Technique Informatique, a pour mission d'accompagner le développement logiciel réalisé par les entités fonctionnelles, et s'appuie sur 4 entités : Socle Développement, Architecture logicielle, Centre d'expertise des performances et DBAs&Socles. Les principales missions de ce service consistent d'une part, à accompagner les équipes dans la définition d'architecture Techniques, la conception des modèles de données, à administrer les bases et les moteurs de bases de données et à construire les socles SGBD, décisionnel et Bigdata.
Les missions :
- Maintient en condition opérationnelle des socles Hadoop Cloudera Hors-Prod et Prod ;
- Pilotage et mise en oeuvre opérationnelle des travaux de fiabilisation et de stablisation des socles Hadoop pour limiter les incidents récurrents et acrroître la disponibilté pour les utilisateurs;
- Mise en place et rédaction de procédures d'administration et d'exploitation;
- Intégration avec l'outillage de l'écosysteme DSI Agirc-Arrco : ordonnanceur IWS, sauvegarde HDPS, supervision Prometheus / Grafana, ... ;
- Capacity planning et performance :
- Suivre le consommé des ressources infra : stockage, cpu, ..
- Mise en place de l'outillage et des procédures nécessaires pour assurer le suivi;
- Evolution des architectures techniques :
- Mise en place opérationnelle des principes de sécurité : outillage, procédures, reporting;
- Vérification de la bonne application des normes et des standards;
- Force de proposition, étude et analyse des solutions d'évolutions : outillage utilisateurs, optimisation des performances
Requirements
Vous justifiez de 5 ans d'expériences sur un poste similaire.
Vous maitrisez les technos suivantes :
- Distribution HADOOP
- Langages de scripting et de développement : Shelle, Python, Spark
- Système d'exploitation Linux
- Moteur de requetage : SQL, Hive, Impala
Savoir faire :
- Pilotage de organisation d'activité projet
- Capacité rédactionnelles : documentation technique, cahier des charges, communication et compte rendu
- Capacités relationnelles, écrites et orales