Data Engineer opérationnel (H/F

AURO CLIC - AURO CLIC

Brussel, Belgium

1 day ago

Apply on www.leforem.be

Prepare application

Role details

Contract type

Temporary contract

Employment type

Full-time (> 32 hours)

Experience level

Expert

Working hours

Regular working hours

Languages

Dutch, English, French, German

Job source

www.leforem.be

Tech stack

Agile Methodology Data Analysis Apache HTTP Server Microsoft Azure DevOps Electronic Data Interchange (EDI) Python (Programming Language) Microsoft SQL Server Neo4j RabbitMQ Redis Azure Data Factory

+3 more

Data Management Serverless Computing Databricks

Job description

Au sein du département Digital & Data, vous intégrerez l’équipe produit en charge de l’intégration des données, la BI et l’analytique, le stockage, la gestion des données de référence et la gouvernance, organisée selon les principes Agile. L’objectif est de fournir des données fiables, réutilisables et accessibles aux utilisateurs, en livrant des fonctionnalités utiles au métier et en renforçant la cohérence des solutions à l’échelle de l’entreprise., * Concevoir, développer et faire évoluer des pipelines de collecte, de transformation et d’enrichissement des données.

Construire des structures de stockage efficaces et des vues matérialisées adaptées aux usages analytiques.
Mettre à disposition des points d’échange de données pour les utilisateurs et les applications.
Développer des traitements Python dans Databricks et mobiliser les services Azure pertinents.
Échanger avec les business analysts et les parties prenantes pour préciser les besoins et proposer des solutions intégrées et réutilisables.
Contribuer aux tests approfondis des solutions et au renforcement des pratiques DevOps.
Rédiger et structurer la documentation technique.
Intervenir, selon les besoins, sur le glossaire, la modélisation, la traçabilité des données et la qualité des données.

Requirements

Expérience significative dans un poste similaire
Maîtrise de SQL Server : utilisation concrète dans des projets de données.
Connaissances avancées des Pipelines Azure : Azure Databricks en priorité ; Azure Data Factory, Azure Functions, Azure Stream/Log Analytics et Azure DevOps.
Maîtrise de Python dans Databricks : création de pipelines ou enrichissement de données.
Ouverture aux nouvelles technologies : capacité à apprendre les outils précédents ainsi que Redis, RabbitMQ, Neo4j ou Apache Arrow.
Français courant ou Néerlandais courant ou Allemand Courant.
Anglais courant

About the company

Activités de conseil en informatique et de gestion d’installations informatiques, Pour le compte d’une ESN, dont le client est une société belge du secteur de l’énergie, je recherche