Senior Data Engineer Azure Databricks F/H

Vous ferez partie d'une équipe data d'une trentaine de personnes composée de plusieurs profils (data scientists, computer vision specialist, data analysts, data engineers, MLOPS, architecte, data product managers, business data owners) avec une culture où le partage des connaissances est centrale. Votre objectif est d'assurer l'accès quantitatif et qualitatif aux sources de données, leur disponibilité et leur qualité afin de faciliter leur exploitation. Votre périmètre d'intervention porte sur les systèmes applicatifs autour de la gestion et du traitement des données et sur les plateformes centralisées Big Data, IoT du groupe.

Principales responsabilités :

• Analyser et organiser les données brutes
• Construire des systèmes de données et des pipelines
• Évaluer les besoins et les objectifs de l'entreprise en matière de traitement des données
• Réaliser des rapports sur les performances des pipelines de données et la consommation de données.
• Préparer les données pour la modélisation prescriptive et prédictive réalisée par l'équipe IA
• Combiner des informations brutes provenant de différentes sources
• Explorer les moyens d'améliorer la qualité et la fiabilité des données
• Identifier les possibilités d'acquisition de données
• Développer des outils et des programmes analytiques, Traitement candidature et RDV avec Raphael d'Externatic
• Entretien opérationnel avec votre manager opérationnel
• Entretien management avec le Manager de département
• Échange RH avec la Talent AcquisitCe que vous apportez Vous êtes passionné par la data science ET le génie logiciel ? Vous aimez donner vie à des modèles de machine learning, les mettre en production et constater leur impact pour l'entreprise ? De formation supérieure (Master or Doctorat) en science des données ou informatique, vous avez 7 ans minimum d'expérience technique portant sur le développement de plateforme Cloud Data Platform. Vous avez un niveau senior sur les environnements cloud (idéalement Azure) avec la maîtrise des plateformes data (idéalement Databricks). Plus globalement, vous avez une très bonne maîtrise des outils Airflow, Hive et PySpark qui vous permet d'être un référent technique auprès de juniors. Votre expérience vous a amené à apporter des réponses à des problématiques de monitoring, déploiement, revue de code, bonnes pratiques. Cela vous permet d'avoir une hauteur de vue sur l'ensemble d'un process ETL, notamment les impacts avec l'infra et la qualité. Compétences

Stack Technique :

• Languages : Python
• Databases : PostgreSQL, MinIO/S3, Neo4J
• Cloud ML Platform : Azure
• Librairies : Pandas, PyTorch, OpenCV, Tensorflow, Scikitlearn, SQLAlchemy
• DEVOPS : Gitlab, AzureDevOps, Airflow, PyTest, Docker, Terraform, Kubernetes
• MLOPS : MLFlow, Databricks, Evidently
• AI Working environment : Pycharm PRO with AI assistant, VSCode, Solides compétences analytiques et la capacité de combiner des données provenant de différentes sources.
• Maîtrise de plusieurs langages de programmation et la connaissance des méthodes de machine learning.
• Souci du détail, d'excellentes capacités d'organisation en toute autonomie
• À l'aise dans un contexte greenfield qui nécessite flexibilité et adaptabilité rapide
• Forte capacité d'apprentissage pour les nombreuses informations complexes
• Pratiques de l'anglais et français couramment

Avantages Conditions de travail

• Localisation : Bordeaux
• Télétravail : 2 à 3 jours par semaine

Ce que vous allez y gagner

• Rémunération : +/-70K€ selon expérience
• Avantages : Conciergerie, retraite complémentaire, restaurant d'entreprise, séances d'ostéopathie
• Temps de travail : Le télétravail et Flex Office sont en vigueur dans cet environnement de travail moderne.

Entreprise de haute technologie dont la raison d'être se trouve principalement dans la transition écologique. Créée en 2020 sous l'impulsion des pouvoirs publics, de grands noms du monde privé ont déjà rejoint l'aventure - et quelques 1000 collaborateurs (issus de plus de 25 nationalités) y apportent à présent leur expertise.#Industry4.0 #GigaFactory #GreenTech