Data Engineer Core Data Stock H/F

Skiils
Lille, France
1 day ago
Apply on www.hellowork.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
English, French

Tech stack

Agile Methodology Airflow Amazon Web Services Big Data Cloud Computing Software Quality Code Review Continuous Delivery Continuous Integration Data Governance Data Infrastructure Github
+11 more
Python (Programming Language) Performance Tuning Scrum Methodology SQL Databases Data Build Tool (dbt) Git Pyspark Core Data Data Management Machine Learning Operations Databricks

Job description

Concevoir, construire et maintenir des infrastructures et des pipelines robustes et performants

  • Garantir une architecture et une modĂ©lisation des flux optimisĂ©s et Ă©volutives
  • Apporter une expertise et aider l’équipe Ă  prendre les meilleurs choix techniques
  • Transformer la stack legacy vers les nouveaux standards de la Data Platform
  • Assurer la qualitĂ©, la fiabilitĂ© et la gouvernance des donnĂ©es
  • MaĂźtriser la qualitĂ© du code et promouvoir les meilleures pratiques
  • Collaborer en environnement Agile au sein d’une Ă©quipe internationale (anglais)
  • Garantir un RUN de qualitĂ© (SLA) selon le principe “You build it, you run it”
  • Respecter les engagements de sprint et s’inscrire dans une dĂ©marche d’amĂ©lioration continue

Outils & Environnement

  • Plateforme Data Core (Cloud & Gouvernance)
  • Expertise sur DataBricks pour la gestion des clusters, l’optimisation des performances des workloads Big Data et la mise en place d’une gouvernance solide

Langages & Modélisation

  • MaĂźtrise avancĂ©e et pratique SQL pour la modĂ©lisation et l’interrogation des donnĂ©es
  • ExpĂ©rience avec DBT (Data Build Tool) pour l’industrialisation, la documentation et le testing de nos modĂšles de donnĂ©es
  • Connaissance et pratique de PySpark pour la transformation et le traitement de donnĂ©es
  • Une connaissance en Scala sera aussi apprĂ©ciĂ©e

Orchestration & MLOps

  • ExpĂ©rience avec Airflow pour la crĂ©ation, le monitoring et l’optimisation des DAGs complexes garantissant la fiabilitĂ© de notre chaĂźne de production Data

Méthodologie & Qualité

  • Travail en environnement agile (Scrum/Kanban)
  • Pratique quotidienne de la revue de code et des principes de CI/CD (intĂ©gration et dĂ©ploiement continus) via des outils comme GitHub

Communication Internationale

  • MaĂźtrise de l’anglais indispensable pour interagir au quotidien avec notre Ă©quipe internationale et nos partenaires globaux

Requirements

DBT : Avancé

  • SQL : AvancĂ©
  • Databricks : ConfirmĂ©
  • Astronomer : ConfirmĂ©
  • PySpark : AvancĂ©
  • AWS : AvancĂ©
  • Apache Airflow : AvancĂ©
  • Python : ConfirmĂ©

Langues

  • Anglais : Courant
  • Français, Profil recherchĂ©MaĂźtrise avancĂ©e et pratique de SQL pour la modĂ©lisation et l’interrogation des donnĂ©esExpĂ©rience avec DBT (Data Build Tool) pour l’industrialisation, la documentation et le testing des modĂšles de donnĂ©esConnaissance et pratique de PySpark pour la transformation et le traitement de donnĂ©esUne connaissance en Scala sera apprĂ©ciĂ©eExpĂ©rience avec Airflow pour la crĂ©ation, le monitoring et l’optimisation des DAGs complexesExpertise sur DataBricks pour la gestion des clusters et l’optimisation des performances des workloads Big DataTravail en environnement agile (Scrum/Kanban)Pratique quotidienne de la revue de code et des principes de CI/CD via des outils comme GitHubMaĂźtrise de l’anglais indispensable pour interagir au quotidien avec une Ă©quipe internationaleProfil engagĂ©, dynamique et proactif avec une forte appĂ©tence businessCapacitĂ© Ă  jouer un rĂŽle fort dans le collectif, avec des valeurs d’entraide, de co-construction et de curiositĂ©, 1. MaĂźtrise avancĂ©e et pratique de SQL pour la modĂ©lisation et l’interrogation des donnĂ©es 2. ExpĂ©rience avec DBT (Data Build Tool) pour l’industrialisation, la documentation et le testing des modĂšles de donnĂ©es 3. Connaissance et pratique de PySpark pour la transformation et le traitement de donnĂ©es 4. Une connaissance en Scala sera apprĂ©ciĂ©e 5. ExpĂ©rience avec Airflow pour la crĂ©ation, le monitoring et l’optimisation des DAGs complexes 6. Expertise sur DataBricks pour la gestion des clusters et l’optimisation des performances des workloads Big Data 7. Travail en environnement agile (Scrum/Kanban) 8. Pratique quotidienne de la revue de code et des principes de CI/CD via des outils comme GitHub 9. MaĂźtrise de l’anglais indispensable pour interagir au quotidien avec une Ă©quipe internationale 10. Profil engagĂ©, dynamique et proactif avec une forte appĂ©tence business 11. CapacitĂ© Ă  jouer un rĂŽle fort dans le collectif, avec des valeurs d’entraide, de co-construction et de curiositĂ©

EUR

Cluster Anglais Scala Kanban SQL AWS Gestion des données Git Pro-activité Big data Python Scrum Gouvernance des données

Benefits & conditions

Taux journalier :Salaire selon profil

About the company

Nous sommes animĂ©s par la conviction que le sport est un vecteur d’union et d’inspiration. Notre mission est de rendre le sport accessible au plus grand nombre, partout dans le monde. Pour rĂ©aliser cette ambition, la Data n’est pas un simple support : elle est la source de vĂ©ritĂ© qui guide chaque prise de dĂ©cision et modĂšle l’innovation de notre Ă©cosystĂšme. L’équipe Stock est au centre de cette dynamique. Son rĂŽle est capital : garantir l’accessibilitĂ©, la fiabilitĂ© et la qualitĂ© des donnĂ©es qui alimentent les indicateurs de bonne santĂ© de notre business (taux de disponibilitĂ©, vitesse de rotation de nos stocks
) mais aussi la prise de dĂ©cision autour des sujets de supply (respect de nos promesses client, maĂźtrise de nos coĂ»ts supply, traçabilité ).

Notre Ă©quipe est composĂ©e de 3 Product Managers et de plusieurs Data Engineers. Elle est en lien avec ses consommateurs de donnĂ©es et s’impose de bien comprendre les besoins analytiques. Au sein de cette Ă©quipe, nous cultivons l’excellence technique, l’impact business et une collaboration sans aucune frontiĂšre. En tant que Data Engineer au sein de l’équipe Core Data Stock, vous ĂȘtes une personne engagĂ©e, dynamique et proactive avec une forte appĂ©tence business. Vous ne vous contentez pas de maintenir des pipelines ; vous les concevez pour gĂ©nĂ©rer de la valeur et accĂ©lĂ©rer l’innovation sur notre Ă©cosystĂšme. Vous jouerez un rĂŽle pivot dans le succĂšs des nouveaux projets d’intĂ©gration d’outils et l’évolution de nos systĂšmes. Il est donc impĂ©ratif d’avoir une personne qui jouera un rĂŽle fort dans le collectif, l’entraide, la co-construction et la curiositĂ© sont des valeurs indispensables Ă  la rĂ©ussite de la mission au sein de l’équipe Core Data Stock.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com
Prepare application

Good distractions

Loading talks and stories from around this role