Data Engineer AWS / Snowflake - CDI H/F

Collective
Lyon, France
yesterday

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
French
Compensation
€ 45K

Job location

Lyon, France

Tech stack

Amazon Web Services (AWS)
Amazon Web Services (AWS)
Continuous Delivery
Continuous Integration
Data Architecture
Data Security
Python
SQL Databases
Data Processing
Delivery Pipeline
Snowflake
GIT
Data Management
Docker

Job description

Expansion continue d'une plateforme Data Groupe basée sur AWS et Snowflake, vous rejoindrez l'équipe CSM Plateformes Data & RPA en tant que Concepteur Développeur Spécialisé. La plateforme, déjà opérationnelle et utilisée par plusieurs directions métiers, a vocation à couvrir un périmètre de plus en plus large, ce qui nécessite de renforcer l'équipe en charge de son exploitation et de son développement.

Administration & gestion de la plateforme AWS

Diagnostiquer et résoudre les incidents liés à la plateforme AWS et mettre en place des actions préventives pour minimiser les risques d'interruption de service

Participer à la conception et au développement de composants techniques pour des solutions innovantes, notamment pour le traitement sécurisé de grands volumes de données

Créer et maintenir des pipelines CI/CD pour les déploiements continus

Superviser la gestion du dépôt Git (branches, pull requests, merges) pour garantir une collaboration efficace au sein de l'équipe

Administration & gestion de la plateforme Snowflake

Concevoir et déployer des solutions exploitant pleinement les capacités de Snowflake : multi-cluster, partage de données sécurisé, optimisation des charges de travail

Élaborer des modèles de données optimisés pour des performances maximales et des coûts maîtrisés

Mettre en place des architectures de données robustes et créer des environnements modulaires et conteneurisés pour faciliter l'expérimentation et le prototypage

Intégration & gestion des données

Superviser l'intégration des données issues de sources multiples et variées (structurées et non structurées)

Assurer le nettoyage, la validation et la sécurisation des données avant leur utilisation en aval

Contribuer à la gestion des référentiels de données internes pour garantir leur cohérence dans l'ensemble du groupe

Collaboration, documentation & formation

Travailler en coordination avec les équipes de développement et d'exploitation pour aligner les besoins métier avec les solutions techniques

Documenter les processus, architectures et solutions mises en œuvre pour assurer la pérennité des bonnes pratiques

Animer des sessions de sensibilisation ou de formation sur les meilleures pratiques en matière de gestion des données

Sécurité, conformité & veille technologique

Garantir la conformité des solutions déployées avec les politiques de sécurité et les normes internes

Contribuer à l'amélioration continue des processus liés à la sécurité des infrastructures et des données

Assurer une veille technologique active pour identifier les opportunités d'amélioration et anticiper les évolutions du marché

Participer à l'animation de la communauté technique autour des solutions et infrastructures de données

Requirements

Appréciées :

Expérience dans un environnement de production à forte exigence de disponibilité et de performance

Sensibilité aux enjeux de gouvernance et de qualité des données

Esprit d'initiative et capacité à proposer des évolutions architecturales

Indispensables :

Expertise confirmée sur les services AWS : EC2, S3, Lambda, Step Functions, Glue et services associés

Maîtrise avancée de Snowflake : administration, sécurité, optimisation et fonctionnalités avancées

Solides compétences en CI/CD, Git et Docker

Maîtrise de Python et SQL pour le développement de pipelines et la manipulation de données

Capacité à travailler en mode collectif et transverse, avec des interlocuteurs aussi bien techniques que métiers

Autonomie, rigueur et sens de l'organisation

Benefits & conditions

Salaire: 40 000 - 45 000€

Apply for this position