Data Engineer - Expertise Databricks (/NB) F/H

Trimane
Canton of Courbevoie-2, France
yesterday

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
French, English
Experience level
Senior

Job location

Canton of Courbevoie-2, France

Tech stack

Agile Methodologies
Airflow
Unit Testing
Business Systems
Cloud Computing
Continuous Integration
Data Architecture
Data Integration
ETL
Data Warehousing
Python
Scrum
SQL Databases
Data Streaming
Azure
Snowflake
Spark
GIT
Containerization
Data Lake
Kubernetes
Amazon Web Services (AWS)
Kafka
Apache Beam
Docker
Databricks

Job description

Développer, maintenir et optimiser les pipelines de données en mettant l'accent sur la qualité, la performance et la scalabilité.

  • Collaborer étroitement avec les Business Analysts afin de traduire les besoins métiers et les analyses produits en solutions de données performantes.
  • Travailler avec les architectes data pour concevoir des modèles et des tables de données efficaces, facilitant l'accès rapide aux insights pour les utilisateurs finaux.
  • Concevoir, mettre en œuvre et surveiller des indicateurs de qualité des données afin de garantir leur intégrité, leur cohérence et leur fiabilité.
  • Créer, maintenir et exécuter une documentation de test complète, incluant les tests unitaires, d'intégration et de validation.
  • Communiquer l'avancement des projets de manière claire et adaptée à différents types d'interlocuteurs, techniques et non techniques.
  • Adopter une approche proactive de résolution de problèmes afin d'identifier, analyser et corriger les anomalies ou incidents.
  • Concevoir, développer et optimiser des flux ELT performants et robustes.
  • Comprendre la stratégie produit et les usages de la donnée afin de garantir l'alignement des solutions mises en œuvre avec les objectifs métiers.

Requirements

Diplômé(e) d'une grande école d'ingénieur ou d'une formation universitaire en informatique, en data engineering ou dans un domaine technique similaire, vous souhaitez relever des défis ambitieux ? Ce poste est fait pour vous !, Vous justifiez d'une expérience de 5 ans minimum (en CDI) sur des sujets de Data Engineering, architecture de données ou développement data.

  • Une expérience significative en cabinet de conseil est un réel atout.
  • Vous possédez une expertise reconnue en architecture data (Data Lake, Data Warehouse, Lakehouse, data mesh), en ingénierie des données (ETL/ELT, pipelines batch et streaming) et une solide connaissance des enjeux métiers.
  • Vous maîtrisez les technologies et outils suivants : Python, SQL, Spark, Airflow, Kafka, plateformes Cloud (Azure Data Factory, AWS Glue, GCP Dataflow, Databricks, Snowflake), conteneurisation (Docker, Kubernetes) et outils de versionning (Git, CI/CD).
  • Une certification (à jour) sur l'un des éléments suivant est apprécié : Spark/SQL/Snowflake/Databricks.
  • Expérience en intégration de données depuis des systèmes d'entreprise complexes (ERP, CRM, finance, RH).
  • Maîtrise des techniques d'ingestion et de transformation dans un environnement cloud (idéalement Snowflake).
  • Compétences solides en data modeling analytique & orchestration de pipelines de données.
  • Capacité à travailler en méthodologie Agile (Scrum).
  • Anglais maitrisé.
  • Excellent relationnel client, posture de conseil, sens de la synthèse.
  • Leadership naturel et appétence pour la transmission de savoir et le travail en équipe.

About the company

Trimane recherche un(e) Data Engineer - Expertise Databricks, pour piloter les projets de migration de l'un de ses clients.

Apply for this position