Senior Data Engineer / Tech Lead Data Databricks - CDI

Hexateam

Paris, France

20 days ago

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Experience level

Expert

Working hours

Regular working hours

Job source

fr.indeed.com

Tech stack

Airflow Amazon Web Services Amazon S3 Confluence JIRA Code Review Identity and Access Management Python (Programming Language) Scrum Methodology SQL Databases Apache Spark Git

+5 more

Pyspark Gitlab-ci Functional Programming Cloudwatch Databricks

Job description

Concevoir et faire évoluer l?architecture des pipelines de données sur Databricks.

Développer et optimiser les traitements d?ingestion et de transformation en Python, Spark et SQL.

Piloter l?orchestration et la supervision des traitements sur AWS.

Garantir la performance, la fiabilité et la qualité des pipelines de données.

Définir les bonnes pratiques de développement, participer aux revues de code et accompagner les membres de l?équipe.

Assurer le support technique, la résolution des incidents complexes et l?amélioration continue de la plateforme.

Participer aux ateliers d?architecture, aux échanges avec les équipes métiers et contribuer aux choix techniques.

Requirements

Profil recherchéVous disposez d?une solide expérience en Data Engineering et souhaitez intervenir sur des sujets d?architecture et de leadership technique. Vous êtes reconnu(e) pour votre expertise, votre autonomie et votre capacité à accompagner une équipe.

Compétences techniquesObligatoires

Python

Spark

Databricks

SQL

AWS (S3, Glue, Airflow, CloudWatch, Lambda, IAM)

Git / GitLab CI/CD

Jira & Confluence

Méthodologie Agile Scrum

About the company

Votre missionDans le cadre du développement de notre plateforme Data, nous recherchons un(e) Senior Data Engineer / Tech Lead Databricks pour piloter les développements, garantir la qualité des solutions mises en ?uvre et accompagner les équipes sur les sujets techniques.