Senior Data Engineer / Tech Lead Data Databricks - CDI
Role details
Job location
Tech stack
Job description
Concevoir et faire évoluer l?architecture des pipelines de données sur Databricks.
Développer et optimiser les traitements d?ingestion et de transformation en Python, Spark et SQL.
Piloter l?orchestration et la supervision des traitements sur AWS.
Garantir la performance, la fiabilité et la qualité des pipelines de données.
Définir les bonnes pratiques de développement, participer aux revues de code et accompagner les membres de l?équipe.
Assurer le support technique, la résolution des incidents complexes et l?amélioration continue de la plateforme.
Participer aux ateliers d?architecture, aux échanges avec les équipes métiers et contribuer aux choix techniques.
Requirements
Profil recherchéVous disposez d?une solide expérience en Data Engineering et souhaitez intervenir sur des sujets d?architecture et de leadership technique. Vous êtes reconnu(e) pour votre expertise, votre autonomie et votre capacité à accompagner une équipe.
Compétences techniquesObligatoires
Python
Spark
Databricks
SQL
AWS (S3, Glue, Airflow, CloudWatch, Lambda, IAM)
Git / GitLab CI/CD
Jira & Confluence
Méthodologie Agile Scrum