Data Engineer Dbt Databricks Airflow H/F

Skiils
Lille, France
7 days ago
Apply on www.hellowork.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours

Tech stack

Airflow Amazon Web Services Software Quality Code Review Continuous Integration Data Governance Data Infrastructure Github Python (Programming Language) Performance Tuning Scrum Methodology SQL Databases
+4 more
WebKit Git Pyspark Databricks

Job description

Concevoir, construire et maintenir des pipelines et infrastructures robustes et performants

  • Garantir une architecture et une modĂ©lisation des flux optimisĂ©es et Ă©volutives
  • Faire Ă©voluer la stack legacy vers les nouveaux standards de la Data Platform
  • Assurer la qualitĂ©, la fiabilitĂ© et la gouvernance des donnĂ©es
  • Apporter votre expertise et aider l’équipe dans ses choix techniques
  • Promouvoir la qualitĂ© du code et les bonnes pratiques (revue de code, CI/CD)
  • Respecter les engagements de sprint et contribuer Ă  l’amĂ©lioration continue

Requirements

Profil recherchédbt (avancé) : industrialisation, documentation, tests des modÚlesSQL (avancé) : modélisation et interrogationDatabricks (confirmé) : gestion des clusters, optimisation des performances, gouvernancePySpark (avancé)Apache Airflow (avancé) et Astronomer (confirmé) : création, monitoring et optimisation de DAGs complexesAWS (avancé)Python (confirmé)CI/CD et revue de code au quotidien (GitHub)Travail en environnement agile (Scrum / Kanban)

Mais aussi


Taux journalier :550.css-11k7fwb{display:inline-block;white-space:nowrap;vertical-align:middle;-webkit-padding-start:var(–chakra-space-1-5);padding-inline-start:var(–chakra-space-1-5);-webkit-padding-end:var(–chakra-space-1-5);padding-inline-end:var(–chakra-space-1-5);text-transform:none;font-size:var(–chakra-fontSizes-xs);border-radius:var(–chakra-radii-md);font-weight:var(–chakra-fontWeights-semibold);background:var(–chakra-colors-success-200);color:var(–chakra-colors-success-700);box-shadow:var(–badge-shadow);padding:4px 6px;–badge-bg:var(–chakra-colors-success-100);–badge-color:colors.success.800;}.chakra-ui-dark .css-11k7fwb:not([data-theme]),[data-theme=dark] .css-11k7fwb:not([data-theme]),.css-11k7fwb[data-theme=dark]{–badge-bg:rgba(226, 243, 232, 0.16);–badge-color:var(–chakra-colors-success-200);}Cette offre est Ă  0% de commission .css-74lrwu{width:1em;height:1em;line-height:1em;-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;color:currentColor;font-size:16px;display:-webkit-box;display:-webkit-flex;display:-ms-flexbox;display:flex;-webkit-transition:.1s ease-in-out color;transition:.1s ease-in-out color;}.css-74lrwu *{-webkit-transition:.1s ease-in-out fill;transition:.1s ease-in-out fill;fill:var(–chakra-colors-rythm-600);}, * dbt (avancĂ©) : industrialisation, documentation, tests des modĂšles

  • SQL (avancĂ©) : modĂ©lisation et interrogation
  • Databricks (confirmĂ©) : gestion des clusters, optimisation des performances, gouvernance
  • PySpark (avancĂ©)
  • Apache Airflow (avancĂ©) et Astronomer (confirmĂ©) : crĂ©ation, monitoring et optimisation de DAGs complexes
  • AWS (avancĂ©)
  • Python (confirmĂ©)
  • CI/CD et revue de code au quotidien (GitHub)
  • Travail en environnement agile (Scrum / Kanban)

EUR

Cluster SQL AWS Git Optimisation des performances Python Gouvernance des données

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com
Prepare application

Good distractions

Loading talks and stories from around this role