Data Engineer Databricks H/F

Orange Group
Lyon, France
1 day ago
Apply on candidat.francetravail.fr
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience required
1 year minimum
Working hours
Regular working hours

Tech stack

Application Programming Interfaces (APIs) Microsoft Azure Databases Continuous Integration Data Governance Extract Transform Load (ETL) Data Transformation Github Machine Learning Data Streaming Azure Data Factory Apache Spark
+2 more
Data Lakehouse Databricks

Job description

DESCRIPTION : Votre rĂŽle:Ingestion et transformation des donnĂ©es Concevoir des pipelines ETL/ELT performants et Ă©volutifs IngĂ©rer des donnĂ©es depuis diverses sources (bases de donnĂ©es, fichiers, APIs, streaming, etc.) Appliquer des transformations et des nettoyages sur les donnĂ©es Optimisation et performance Optimiser les requĂȘtes (partitionnement, caching, autoscaling) GĂ©rer les coĂ»ts d’exĂ©cution en adaptant les ressources (clusters Databricks, autoscaling) Gestion et gouvernance des donnĂ©es Mettre en place des Data Lakehouse et organiser les donnĂ©es selon des bonnes pratiques (Bronze, Silver, Gold) Appliquer des politiques de sĂ©curitĂ© et de gouvernance avec Unity Catalog Assurer la qualitĂ© des donnĂ©es Automatisation et industrialisation DĂ©velopper des notebooks et des jobs pour automatiser les traitements Orchestrer les workflows avec Databricks Workflows ou Azure Data Factory Mettre en place du CI/CD avec des outils comme GitHub Actions, Azure DevOps, etc. Collaboration avec les Ă©quipes Data & mĂ©tier Travailler avec les Data Scientists pour fournir des jeux de donnĂ©es prĂȘts pour le Machine Learning Aider les analystes Ă  optimiser leurs requĂȘtes et tableaux de bord (BI) Assurer un rĂŽle de conseil sur les bonnes pratiques Databricks et Spark Le recueil des besoins mĂ©tiers La rĂ©daction de spĂ©cifications fonctionnelles et techniques L’accompagnement des mĂ©tiers dans la mise en place de leur besoin dans la data plateforme CompĂ©tences techniques :DatabricksAzurePowerBISparkSQLVotre profil

Requirements

Profil de formation Data, vous justifiez d’au moins 2 ans expĂ©riences significatives en qualitĂ© de consultant DATA Databricks.

About the company

Orange Business est un intĂ©grateur rĂ©seau et numĂ©rique qui comprend toute la chaĂźne de valeur du monde digital, permettant Ă  nos clients de se concentrer sur les initiatives stratĂ©giques qui font avancer leur business. Chaque jour, vous collaborerez avec une Ă©quipe dĂ©diĂ©e Ă  la livraison de solutions globales cohĂ©rentes et durables, peu importe oĂč nos clients opĂšrent. Avec plus de 30 000 salariĂ©s en Europe, Asie, AmĂ©rique et Afrique, nous proposons un environnement dynamique et innovant permettant de dĂ©velopper et affiner vos compĂ©tences. Nous offrons des opportunitĂ©s passionnantes dans la data et le digital, le cloud, l’IA, la cybersĂ©curitĂ©, ou encore l’IoT et le digital workspace.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on candidat.francetravail.fr
Prepare application

Good distractions

Loading talks and stories from around this role