L'expert technique Data Ops / Lakehouse

Dans le cadre des activités du Centre d'Expertise Data Ingénierie Ops, le client recherche un consultant orienté Big Data disposant d'une solide expertise en exploitation, support et administration de plateformes data.

Le prestataire interviendra sur des environnements Warehouse Teradata et Lakehouse afin d'assurer le maintien en conditions opérationnelles, le support avancé et l'amélioration continue des plateformes., L'expert technique Data Ops / Lakehouse aura pour principales responsabilités :

• Assurer le maintien en conditions opérationnelles des plateformes

• Gérer les incidents et les demandes des projets ou des utilisateurs finaux

• Participer à l'implémentation et à l'automatisation des solutions

• Réaliser les déploiements sur les environnements d'intégration, préproduction et production

• Contribuer à l'amélioration continue des outils d'exploitation et de déploiement

• Assurer une communication régulière avec le Product Owner et les équipes projets, Création de jobs simples

• Gestion des calendriers et dépendances

• Gestion des profils de connexion

• Apache Airflow :

• Création de DAGs simples

• Utilisation d'operators standards

• Gestion des retries

• Scheduling et dépendances

• Gestion des XComs

• Kafka / Kafka Connect

• Monitoring Kafka

• Grafana

Environnement Data Warehouse - Teradata

• Très bonne maîtrise de SQL

• Bon niveau en scripting Shell

• Lecture et compréhension de structures de fichiers XML, JSON et YAML

• Control-M :

• Création de jobs simples

• Gestion des calendriers et dépendances

• Gestion des profils de connexion

• ETL Informatica :

• Création de mappings simples

• Transformations basiques

• Analyse de logs SQL

• Environnements Unix / Linux (Putty, Pagent)

• Jenkins

• TeraData Studio apprécié

• Connaissances Power BI appréciées

Environnement Lakehouse

• Administration Dataiku

• Administration DBT

• Starburst / Trino :

• Administration

• Troubleshooting

• Optimisation des performances

• Kubernetes, GitLab

• Control-M, Bonne compréhension des méthodologies Agile et des principes Scrum

• Expérience en gestion des incidents et des changements

• Culture DevOps :

• Participation aux rituels et échanges entre équipes Dev, Test et Ops

• Contribution aux retours d'incidents et préparations des mises en production

• Culture Produit et compréhension du fonctionnement en mode produit

• Anglais courant et technique

• Bonnes capacités rédactionnelles et de communication

• Minimum 2 à 5 ans d'expérience en environnement Ops

• Expérience significative en support N2 / N3 sur des plateformes Data

Notre groupe est au service de la transformation digitale des entreprises depuis 20 ans. De l'étude à la réalisation en passant par le conseil, nous travaillons sur des projets de refonte d'infrastructure, de Cloud, d'Intelligence artificielle, de Cybersécurité, d'équipements « Endpoint », de Smartcity ou encore en développement web et applicatif. Nous sommes convaincus qu'il ne suffit pas de transformer l'IT et qu'il faut aussi être capable de digitaliser les produits, les services et plus généralement les métiers #DIGITALWAY La complémentarité de nos différents pôles et de leurs expertises respectives permet aujourd'hui à REEL IT de se distinguer par son hyper-compétence, sa polyvalence et son dynamisme. La cohésion entre nos différents pôles d'expertise constitue notre force pour faire face à la complexité et à l'ampleur de tous les projets que nous abordons.