Data Engineer Databricks F/H

Votre rôle: Ingestion et transformation des données Concevoir des pipelines ETL/ELT performants et évolutifs Ingérer des données depuis diverses sources (bases de données, fichiers, APIs, streaming, etc.) Appliquer des transformations et des nettoyages sur les données Optimisation et performance Optimiser les requêtes (partitionnement, caching, autoscaling) Gérer les coûts d'exécution en adaptant les ressources (clusters Databricks, autoscaling) Gestion et gouvernance des données Mettre en place des Data Lakehouse et organiser les données selon des bonnes pratiques (Bronze, Silver, Gold) Appliquer des politiques de sécurité et de gouvernance avec Unity Catalog Assurer la qualité des données Automatisation et industrialisation Développer des notebooks et des jobs pour automatiser les traitements Orchestrer les workflows avec Databricks Workflows ou Azure Data Factory Mettre en place du CI/CD avec des outils comme GitHub Actions, Azure DevOps, etc. Collaboration avec les équipes Data & métier Travailler avec les Data Scientists pour fournir des jeux de données prêts pour le Machine Learning Aider les analystes à optimiser leurs requêtes et tableaux de bord (BI) Assurer un rôle de conseil sur les bonnes pratiques Databricks et Spark Le recueil des besoins métiers La rédaction de spécifications fonctionnelles et techniques L'accompagnement des métiers dans la mise en place de leur besoin dans la data plateforme Compétences techniques : Databricks Azure PowerBI Spark SQL Votre profil: Profil de formation Data, vous justifiez d'au moins 2 ans expériences significatives en qualité de consultant DATA Databricks. Entité:

Orange Business est un intégrateur réseau et numérique qui comprend toute la chaîne de valeur du monde digital, permettant à nos clients de se concentrer sur les initiatives stratégiques qui font avancer leur business. Chaque jour, vous collaborerez avec une équipe dédiée à la livraison de solutions globales cohérentes et durables, peu importe où nos clients opèrent. Avec plus de 30 000 salariés en Europe, Asie, Amérique et Afrique, nous proposons un environnement dynamique et innovant permettant de développer et affiner vos compétences. Nous offrons des opportunités passionnantes dans la data et le digital, le cloud, l'IA, la cybersécurité, ou encore l'IoT et le digital workspace.

Do you have experience in Spark?