Data Engineer Databricks H/F

Propertyvalue
France
17 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
English

Tech stack

Artificial Intelligence Microsoft Azure Cloud Computing Continuous Integration Data Infrastructure Extract Transform Load (ETL) Github Microsoft Visual Studio Standard Sql SQL Databases Management of Software Versions Planning Software
+7 more
Azure Data Factory GitHub Copilot Git Pyspark Data Lineage Data Management Databricks

Job description

Développer des pipelines de données robustes et scalables

  • Optimiser les performances (coûts, temps de traitement)
  • Industrialiser les workflows (CI/CD, versioning)
  • Accompagner les équipes sur les bonnes pratiques

Stack & environnement

  • Data processing : Databricks, PySpark, SQL
  • Data pipelines : Azure Data Factory (ETL / ELT)
  • Data platform : Databricks Asset Bundles
  • Dev & CI/CD : Git, Azure DevOps, GitHub
  • AI-assisted dev : GitHub Copilot
  • IDE : Visual Studio Code
  • Cloud : environnement Azure
  • Data practices : data lineage, partitionnement, optimisation

Requirements

Profil recherché Profil recherchéTrès bonne maîtrise de Databricks / PySpark / SQLExpérience en industrialisation dataBonne connaissance des pratiques CI/CDAnglais professionnel (contexte international) Les +Stack moderne & orientée industrialisationExposition à des sujets data + AIEnjeux forts de scalabilité, * Très bonne maîtrise de Databricks / PySpark / SQL

  • Expérience en industrialisation data
  • Bonne connaissance des pratiques CI/CD
  • Anglais professionnel (contexte international)

Les +

  • Stack moderne & orientée industrialisation
  • Exposition à des sujets data + AI
  • Enjeux forts de scalabilité

EUR

Anglais ETL SQL Gestion des données Git Visual Studio Logiciels de gestion de versions

Benefits & conditions

Taux journalier :Salaire selon profil

About the company

Renforcement d’une équipe data au sein d’un grand groupe international, avec un fort enjeu d’industrialisation et modernisation des pipelines.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

6:21 min

Investigating push inefficiencies with upstream Git experts

Jonathan Creamer · Coffee With Developers

6:36 min

Funding open source through GitHub Accelerator and Sponsors

Stormy Peters · WWC 2023

4:32 min

Harnessing Spark with Python using PySpark and Py4J

Ayon Roy · LIVE

1:34 min

Bringing diverse skills to industrial data science roles

Katja Träumner

56 sec

Favorite git commands and the importance of patch commits

Eileen Uchitelle Eileen Uchitelle +1 · Coffee With Developers

Videos

See all

Related articles

See all