Senior Data Engineer & Dbt Specialist H/F
Role details
Job location
Tech stack
Job description
Bien que rattaché techniquement à l'équipe Analytics Engineering, ce rôle est strictement orienté Infrastructure et Engineering. Tu agiras comme un pont technique expert, en partenariat étroit avec les flux Data Platform et Data Warehouse Engineering pour résoudre des défis de haute scalabilité., Orchestration Intelligente & Sync-Aware : Tu implémenteras des mécanismes de "handshake" (via dbt macros ou API) pour synchroniser parfaitement l'ingestion (MariaDB, Kafka) et la transformation dbt, passant d'un ordonnancement statique à une orchestration dynamique.
-
Résilience & Idempotence : Tu standardiseras les patterns d'ingestion (Snowpipe vs Airflow) pour garantir l'intégrité des données, l'absence de doublons (idempotence) et l'auto-récupération des pipelines en cas de downtime. Cost-Centric Engineering : Tu établiras les "Gold Standards" pour le traitement de gros volumes (Micro-batching, Incremental Predicates, Clustering) afin d'optimiser les performances tout en minimisant la consommation de crédits Snowflake (objectif : -30% de coûts de compute).
-
Frameworks & PoCs : Tu plongeras dans les patterns techniques existants pour concevoir des Proof of Concepts (PoCs) hautement performants sur les pipelines les plus complexes (tracking à haut volume).
-
Technical Stewardship : Tu documenteras les nouveaux frameworks (Blueprints) et animeras des sessions de montée en compétence (Advanced SQL, dbt macros, Airflow) pour l'équipe interne.
Requirements
De formation supérieure (Bac +4/5) en informatique ou ingénierie, tu es un expert technique senior capable d'auditer des codebases complexes sans avoir besoin de contexte métier métier (Sales/Finance).Tes compétences techniques :Maîtrise d'expert (Indispensable) : Expertise avancée sur dbt (Core), Apache Airflow et Snowflake.High-Volume Strategy : Expérience prouvée dans l'optimisation d'environnements data à très large échelle et la réduction des coûts cloud warehouse.Engineering Patterns : Maîtrise des concepts d'idempotence, de micro-batching et de conception de frameworks résilients.Languages : SQL expert et Python avancé pour le développement de macros et d'opérateurs d'orchestration.Les "Plus" qui feront la différence :Expérience sur l'ingestion de flux continus Kafka.Capacité à délivrer de la valeur via l'audit de logs et de code en autonomie complète.Anglais courant indispensable (contexte international)., De formation supérieure (Bac +4/5) en informatique ou ingénierie, tu es un expert technique senior capable d'auditer des codebases complexes sans avoir besoin de contexte métier métier (Sales/Finance).
Tes compétences techniques :
- Maîtrise d'expert (Indispensable) : Expertise avancée sur dbt (Core), Apache Airflow et Snowflake.
- High-Volume Strategy : Expérience prouvée dans l'optimisation d'environnements data à très large échelle et la réduction des coûts cloud warehouse.
- Engineering Patterns : Maîtrise des concepts d'idempotence, de micro-batching et de conception de frameworks résilients.
- Languages : SQL expert et Python avancé pour le développement de macros et d'opérateurs d'orchestration.
Les "Plus" qui feront la différence :
- Expérience sur l'ingestion de flux continus Kafka.
- Capacité à délivrer de la valeur via l'audit de logs et de code en autonomie complète.
- Anglais courant indispensable (contexte international).