> Markdown version of [/jobs/ext/1433570-data-engineer-big-data-h-f](https://www.wearedevelopers.com/jobs/ext/1433570-data-engineer-big-data-h-f). Every page supports `.md` or `Accept: text/markdown`. Links point to the HTML versions so they work for humans too. Agent guide: [/agents.md](https://www.wearedevelopers.com/agents.md).

---

# Data Engineer Big Data H/F

- **Company:** Qolibris
- **Location:** France
- **Experience:** Expert
- **Contract:** Permanent contract
- **Skills:** Java (Programming Language), Business Analytics Applications, Data Analysis, Unit Testing, Big Data, Continuous Integration, Data Validation, DevOps, Apache Hadoop, Hadoop Distributed File System, Apache HBase, Apache Hive, Apache Maven, NoSQL, Cloudera, Software Engineering, SonarQube, SQL Databases, Data Streaming, Apache Spark, Checkmarx, Jenkins
- **Published:** July 25, 2026
- **Apply:** https://www.hellowork.com/fr-fr/emplois/81684008.html

## About the Role

Profil recherché- Expérience : Minimum de 6 ans d'expérience en développement Big Data et/ou Data Engineering. Expérience significative dans le domaine financier, idéalement en gestion des risques de crédit.- Compétences Techniques Indispensables :o Apache Spark 3.x : Excellente maîtrise du développement, optimisation et scalabilité des applications Spark Java .o Java 8 : Maîtrise approfondie pour développement Spark.o Scala : Souhaitable .o Stack Cloudera : Expérience avérée avec Hadoop (HDFS,Hive, HBase ..).o SQL : Maîtrise indispensable pour l'exploitation et l'analyse des données.o Devops : CI/CD, SonarQube, checkmarx, XLD., Expérience : Minimum de 6 ans d'expérience en développement Big Data et/ou Data Engineering. Expérience significative dans le domaine financier, idéalement en gestion des risques de crédit.

 - Compétences Techniques Indispensables :

o Apache Spark 3.x : Excellente maîtrise du développement, optimisation et scalabilité des applications Spark Java .

o Java 8 : Maîtrise approfondie pour développement Spark.

o Scala : Souhaitable .

o Stack Cloudera : Expérience avérée avec Hadoop (HDFS,Hive, HBase ..).

o SQL : Maîtrise indispensable pour l'exploitation et l'analyse des données.

o Devops : CI/CD, SonarQube, checkmarx, XLD.

EUR

Maven
Scala
Hadoop
SQL
Création d'une base documentaire
Hive
Jenkins
Big data
Test unitaire
SonarQube
Java
Analyse de données

## Description

Développement de Pipelines de Données :

o Concevoir, développer et optimiser des jobs Spark (Java) pour le traitement, la transformation et l'agrégation de grands volumes de données provenant de diverses sources.

o Implémenter des flux de données robustes et performants sur Cloudera.

o Utiliser HBase pour des besoins de stockages NoSQL rapides et l'accès à des données structurées/semi-structurées.

o Développer des requêtes SQL complexes sur HIVE/SPARK pour l'extraction, l'analyse et la validation des données.

 2. Optimisation et Performance :

o Monitorer la performance des jobs Spark et identifier les goulots d'étranglement.

o Optimiser les requêtes SQL et les stratégies de lecture/écriture sur HDFS et HBase.

o Proposer et implémenter des solutions pour améliorer la scalabilité et l'efficacité de la plateforme.

 3. Assurance Qualité et Déploiement (DevOps) :

o Écrire des tests unitaires et d'intégration pour garantir la qualité du code.

o Participer aux processus de Build et de déploiement via les outils CI/CD (Jenkins, XLD).

o Intégrer des outils d'analyse de code statique (SonarQube, Checkmarx) dans le cycle de développement.

o Gérer les dépendances et les versions avec Maven.

 4. Collaboration et Documentation :

o Documenter le code, les architectures et les processus.

o Partager les bonnes pratiques et contribuer à l'amélioration continue de l'équipe.


## Related Videos

- [Alibaba Big Data and Machine Learning Technology](https://www.wearedevelopers.com/videos/37-alibaba-big-data-and-machine-learning-technology)
- [Leveraging Real time data in FSIs](https://www.wearedevelopers.com/videos/806-leveraging-real-time-data-in-fsis)
- [The Road to MLOps: How Verivox Transitioned to AWS](https://www.wearedevelopers.com/videos/1050-the-road-to-mlops-how-verivox-transitioned-to-aws)
- [From DevOps to Scaled DevOps: How We’re Rebuilding Continuous Delivery as a Platform](https://www.wearedevelopers.com/videos/100018-from-devops-to-scaled-devops-how-we-re-rebuilding-continuous-delivery-as-a-platform)
- [Enterprise-Cloud-Native - Fast-Paced Development & Deployment in a Highly Secure Banking Environment](https://www.wearedevelopers.com/videos/671-enterprise-cloud-native-fast-paced-development-deployment-in-a-highly-secure-banking-environment)
- [PySpark - Combining Machine Learning & Big Data](https://www.wearedevelopers.com/videos/44-pyspark-combining-machine-learning-big-data)

## Related Articles

- [Top Big Data Technologies That You Need to Know](https://www.wearedevelopers.com/magazine/108-top-big-data-technologies-that-you-need-to-know)
- [Data Engineer Salary UK](https://www.wearedevelopers.com/magazine/253-data-engineer-salary-uk)
- [Data Analyst Salary in the UK](https://www.wearedevelopers.com/magazine/278-data-analyst-salary-in-the-uk)
- [Data Analyst Salary in Switzerland](https://www.wearedevelopers.com/magazine/276-data-analyst-salary-in-switzerland)
- [Highest Paying Tech Companies for Developers](https://www.wearedevelopers.com/magazine/220-highest-paying-tech-companies-for-developers)
- [The Most Popular IT Jobs on the Market](https://www.wearedevelopers.com/magazine/376-the-most-popular-it-jobs-on-the-market)