Architecte Technique Data Hadoop H/F
Role details
Job location
Tech stack
Job description
Dans le cadre du développement et de l'évolution de plateformes Data stratégiques, nous recherchons un Architecte Technique Data expérimenté pour intervenir sur des environnements Big Data à forte volumétrie.
Vous intégrerez une équipe en charge de la gestion, de l'évolution et du maintien en conditions opérationnelles des plateformes Data utilisées pour le pilotage décisionnel, l'analyse avancée des données, la Data Science et l'industrialisation des traitements.
Votre rôle consistera à concevoir, faire évoluer et administrer les architectures Hadoop Cloudera en environnement de production et hors production., Architecture et évolution des plateformes Data
- Participer aux projets d'évolution des plateformes Big Data existantes.
- Concevoir les architectures techniques des solutions Data.
- Définir les standards, normes et bonnes pratiques d'architecture.
- Réaliser les études d'impacts techniques et préconiser les solutions adaptées.
- Rédiger les dossiers d'architecture et la documentation technique.
- Piloter ou contribuer à la mise en oeuvre des évolutions de la plateforme.
Administration et maintien en conditions opérationnelles
- Assurer l'administration et l'exploitation des environnements Hadoop Cloudera.
- Superviser les plateformes et optimiser leurs performances.
- Diagnostiquer et résoudre les incidents complexes.
- Garantir la disponibilité, la sécurité et la fiabilité des infrastructures Data.
- Accompagner les équipes Études et Exploitation sur les problématiques techniques.
Déploiement de nouvelles solutions Data
- Participer à la mise en place de nouvelles plateformes Big Data.
- Contribuer aux phases de conception, déploiement et mise en production.
- Assurer le transfert de compétences vers les équipes d'exploitation.
- Rédiger les procédures d'administration, d'exploitation et les modes opératoires.
Requirements
Big Data / Hadoop
- Cloudera CDP (7.1.9 / 7.3.x)
- HDFS
- YARN
- Cloudera Manager
- Hive
- Hue
- Impala
- Spark
- Zeppelin
- Ranger
- Knox
- ZooKeeper
- Apache Iceberg
Développement et traitement des données
- Python
- Shell scripting
- Spark
Bases de données et requêtage
- SQL
- Hive SQL
- Impala
Systèmes
- Linux Red Hat, DataStage
- Power BI
- SAS
Bases de données
- Teradata
- PostgreSQL
Data Streaming
- Kafka
Infrastructure & DevOps
- Kubernetes
- Ansible, Profil recherchéFormationBac +5 en Informatique, Data Engineering ou équivalent.ExpérienceMinimum 5 ans d'expérience dans des environnements Big Data.Expérience significative en architecture et administration Hadoop Cloudera.Expérience sur des environnements de production critiques.Bonne maîtrise des problématiques de performance, sécurité et disponibilité des plateformes Data.Qualités attenduesForte autonomie.Esprit d'analyse et de synthèse.Rigueur et sens de l'organisation.Capacité à travailler en équipe.Excellentes qualités rédactionnelles.Sens du partage de connaissances et accompagnement des équipes., * Bac +5 en Informatique, Data Engineering ou équivalent.
Expérience
- Minimum 5 ans d'expérience dans des environnements Big Data.
- Expérience significative en architecture et administration Hadoop Cloudera.
- Expérience sur des environnements de production critiques.
- Bonne maîtrise des problématiques de performance, sécurité et disponibilité des plateformes Data.
Qualités attendues
- Forte autonomie.
- Esprit d'analyse et de synthèse.
- Rigueur et sens de l'organisation.
- Capacité à travailler en équipe.
- Excellentes qualités rédactionnelles.
- Sens du partage de connaissances et accompagnement des équipes.
EUR
SQL Python Esprit d'analyse