Data Engineer H/F

Mane
Le Bar-sur-Loup, France
1 day ago
Apply on hrs.emea.mane.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Expert
Experience required
3 years minimum
Working hours
Regular working hours

Tech stack

Application Programming Interfaces (APIs) Artificial Intelligence Information Systems Databases Extract Transform Load (ETL) Python (Programming Language) Machine Learning SAP ERP Power BI SAP (Applications) SQL Databases Data Processing
+8 more
Feature Engineering Apache Spark Microsoft Fabric Data Lakes Pyspark SAP S/4HANA Machine Learning Operations Databricks

Job description

Dans le cadre du développement de sa plateforme Data et de ses projets d’intelligence artificielle, MANE recherche un(e) Data Engineer. Au sein d’un environnement international et industriel, vous contribuerez à construire les fondations Data utilisées par l’ensemble des domaines de l’entreprise : R&D, formulation, production, qualité, supply chain, achats, ventes, finance, ressources humaines et fonctions corporate. Vous travaillerez au sein d’un écosystème basé principalement sur Azure Databricks et Microsoft Fabric / Power BI pour la consommation et la restitution des données.

Vos missions :

1/Concevoir et industrialiser les pipelines de données

*Concevoir, développer et maintenir les pipelines d’ingestion et de transformation.

*Privilégier Azure Databricks pour les traitements et pipelines Data

*Intégrer des données provenant de systèmes hétérogènes : PLM in-house, notamment GPMS / GPMS-Formulation ; PLM du marché ; SAP ECC ; SAP S/4HANA ; MES ; applications métiers, bases de données, fichiers et APIs.

*Mettre en place des traitements complets et incrémentaux

*Gérer l’historisation, les dépendances, les erreurs et les reprises

*Assurer la supervision, la performance et la maintenabilité des pipelines

*Documenter les flux et les règles de transformation.

2/Modéliser les données pour les usages BI et IA

*Concevoir des modèles de données adaptés aux besoins métiers et analytiques.

*Mdéliser les données pour les usages Power BI, reporting, pilotage et analyse.

*Modéliser les données pour les projets d’intelligence artificielle et de machine learning.

*Suivre les standard de development (ex : architecture medallion)

*Construire des datasets fiables, cohérents, historisés et réutilisables.

*Préparer les données pour les phases d’entraînement, de validation et d’utilisation des modèles IA.

*Garantir la traçabilité entre les données sources, les modèles de données et les usages finaux.

3/Contribuer à la plateforme Data et IA Databricks

*Développer les traitements avec SQL & Python, en exploitant les capacités du Spark engine

*Exploiter les capacités de Databricks et de Delta Lake.

*Participer à la mise en œuvre de modèles de données adaptés aux différents domaines de l’entreprise.

*Collaborer avec les équipes IA et Data Scientists pour traduire les besoins en datasets exploitables.

*Contribuer à l’industrialisation des cas d’usage IA.

*Faciliter la réutilisation des données et des composants entre les projets BI et IA.

*Participer à la mise en place de pratiques de qualité, de gouvernance et de supervision des données.

4/Alimenter les usages Power BI

*Alimenter les datasets et modèles sémantiques utilisés par Power BI via Microsoft Fabric.

*Garantir la qualité, la fraîcheur et la cohérence des données consommées.

*Collaborer avec les équipes BI et métiers pour répondre aux besoins de reporting et de pilotage.

5/Collaborer avec l’IT, l’IA et les métiers, * la conception de pipelines ETL/ELT ;

  • la modélisation de données ;

  • les architectures Data Lake, Lakehouse et datawarehouse

  • les traitements incrémentaux et l’historisation ;

  • les principes de qualité, de gouvernance et de traçabilité des données.

Requirements

De formation supérieure en informatique, Data Engineering, systèmes d’information ou domaine équivalent, vous disposez d’une expérience significative en développement de pipelines et en modélisation de données.

Vous maîtrisez :

  • Azure Databricks ;

  • Python et/ou PySpark ;

  • SQL, Une expérience avec Power BI, Microsoft Fabric, SAP, un PLM ou un MES constitue un atout.

Une connaissance des usages IA - préparation de datasets, feature engineering, machine learning ou MLOps - est également appréciée.

Vous êtes reconnu(e) pour :

  • votre rigueur et votre sens de la qualité ;

  • votre capacité à comprendre des modèles de données complexes ;

  • votre esprit d’analyse ;

  • votre autonomie ;

  • votre capacité à travailler avec les équipes IT, Data, IA et métiers ;

  • votre aptitude à transformer un besoin métier en solution data concrète ;

  • votre esprit d’équipe et votre orientation solution., Niveau d’expérience min. requis

entre 3 ans et 5 ans

About the company

Fondée en 1871 MANE est une entreprise familiale au rayonnement international. N°5 mondial dans la composition d’arômes et de parfums, notre histoire repose sur des valeurs fortes.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on hrs.emea.mane.com
Prepare application

Good distractions

Loading talks and stories from around this role…