> Markdown version of [/jobs/ext/2812286-talencia-consulting-azure-data-engineer-h-f](https://www.wearedevelopers.com/jobs/ext/2812286-talencia-consulting-azure-data-engineer-h-f). Every page supports `.md` or `Accept: text/markdown`. Links point to the HTML versions so they work for humans too. Agent guide: [/agents.md](https://www.wearedevelopers.com/agents.md). --- # Talencia Consulting - Azure Data Engineer H/F - **Company:** Talencia Consulting - **Location:** Belgium - **Experience:** Expert - **Contract:** Temporary contract - **Skills:** Big Data, Cloud Storage, Continuous Integration, Data Infrastructure, Extract Transform Load (ETL), Programming Tools, Jinja (Template Engine), Python (Programming Language), Azure Data Lake, SQL Databases, Data Processing, Azure Data Factory, Apache Spark, Pyspark, Templating, Databricks - **Published:** September 10, 2026 - **Apply:** https://www.actiris.brussels/fr/citoyens/detail-offre-d-emploi/?reference=5949833 ## About the Role * Anglais (atout) + Comprendre : Indépendant - (B1) + Écrire : Indépendant - (B1) + Lire : Indépendant - (B1) + Parler : Indépendant - (B1) * Français (atout) + Comprendre : Expérimenté - (C1) + Écrire : Expérimenté - (C1) + Lire : Expérimenté - (C1) + Parler : Expérimenté - (C1) ## Description L'environnement existant comprend notamment des vues SQL, un système de templating basé sur Jinja ainsi qu'une orchestration via Azure Data Factory. La transformation introduira les fonctionnalités modernes de Databricks, notamment Lakeflow, Unity Catalog, PySpark et des pratiques CI/CD automatisées. En tant qu'Azure Data Engineer, vous rejoindrez une équipe Data Engineering existante et contribuerez directement à la migration et à l'industrialisation de la nouvelle plateforme. Vous serez responsable de la conception, du développement et de la maintenance des pipelines de données, de la migration des data marts existants, de la mise en place de frameworks de qualité et de tests, ainsi que de la validation de l'équivalence des résultats entre l'ancienne et la nouvelle plateforme., Data engineering & ETL: * Développer et industrialiser des pipelines Databricks Lakeflow / Spark Declarative Pipelines * Construire des pipelines d'ingestion utilisant notamment Auto Loader et Copy Into * Implémenter des mécanismes de CDC / SCD Type 2 pour le suivi des changements * Développer les couches de transformation Silver et Gold en utilisant SQL, Python et PySpark * Migrer les vues SQL existantes et les tables basées sur des templates Jinja vers les nouveaux patterns Databricks * Réaliser des migrations complètes de data marts, incluant les pipelines, les tests, la documentation et les modèles de reporting * Travailler avec Azure Data Factory pour l'orchestration et l'intégration avec les Databricks Jobs Data platform & gouvernance: * Travailler avec Azure Data Lake Storage, Azure Blob Storage et Databricks * Concevoir et maintenir les structures Unity Catalog, notamment les catalogues, schémas et contrôles d'accès * Appliquer les bonnes pratiques de sécurité et de gouvernance sur les environnements Dev, UAT et Production * Concevoir des solutions de traitement des données évolutives, performantes et optimisées en termes de coûts * Mettre en place le monitoring et le suivi des coûts au niveau des différents data marts Databricks & Big Data: * Développer des solutions de traitement de données avec Databricks et Apache Spark * Travailler intensivement avec PySpark et SQL sur de grands volumes de données * Contribuer à la migration des workloads data historiques vers une architecture moderne Lakehouse * Utiliser, lorsque cela est pertinent, des outils de développement assistés par l'IA afin d'accélérer les activités de migration, tout en garantissant le respect des standards d'ingénierie * Participer aux tests de non-régression afin de garantir que les données migrées produisent des résultats équivalents à ceux de l'environnement historique Data quality & analytics: * Contribuer à la mise en place d'un framework structuré de Data Quality ## Related Videos - [PySpark - Combining Machine Learning & Big Data](https://www.wearedevelopers.com/videos/44-pyspark-combining-machine-learning-big-data) - [Alibaba Big Data and Machine Learning Technology](https://www.wearedevelopers.com/videos/37-alibaba-big-data-and-machine-learning-technology) - [Backstage Software Templates for Java Developers](https://www.wearedevelopers.com/videos/1596-backstage-software-templates-for-java-developers) - [Introduction to Azure Machine Learning](https://www.wearedevelopers.com/videos/368-introduction-to-azure-machine-learning) - [Empowering Retail Through Applied Machine Learning](https://www.wearedevelopers.com/videos/976-empowering-retail-through-applied-machine-learning) - [Backstage in Practice: Offloading Developer Operational Work Through Platform Self-Service](https://www.wearedevelopers.com/videos/1922-backstage-in-practice-offloading-developer-operational-work-through-platform-self-service) ## Related Articles - [Data Engineer Salary UK](https://www.wearedevelopers.com/magazine/253-data-engineer-salary-uk) - [What Are The Top Skills Required For Azure Developers?](https://www.wearedevelopers.com/magazine/77-what-are-the-top-skills-required-for-azure-developers) - [The Most Popular IT Jobs on the Market](https://www.wearedevelopers.com/magazine/376-the-most-popular-it-jobs-on-the-market) - [Top-Paying Tech Jobs (with Salaries)](https://www.wearedevelopers.com/magazine/372-top-paying-tech-jobs-with-salaries) - [Data Analyst Salary in the UK](https://www.wearedevelopers.com/magazine/278-data-analyst-salary-in-the-uk) - [Software Engineer Salary London](https://www.wearedevelopers.com/magazine/252-software-engineer-salary-london)