Data Engineer

Sparagus

Luik, Belgium

22 days ago

Apply on www.adzuna.be

Prepare application

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Experience level

Expert

Experience required

5 years minimum

Working hours

Regular working hours

Job source

www.adzuna.be

Tech stack

Airflow Databases Continuous Integration Data Architecture Extract Transform Load (ETL) Python (Programming Language) Software Engineering SQL Databases Delivery Pipeline Apache Spark Jupyter Data Lakes

+4 more

Pyspark Kubernetes Docker Jenkins

Job description

Concevoir, développer et maintenir des pipelines de données (ETL/ELT).
Définir et mettre en œuvre des architectures de données robustes et évolutives.
Administrer et optimiser des Data Lakes, bases de données et solutions de stockage.
Développer des traitements de données avec Python, SQL et Spark/PySpark.
Mettre en place et améliorer les pipelines CI/CD ainsi que les bonnes pratiques de développement.
Collaborer avec les équipes d’ingénierie, de développement logiciel et de Data Science.
Garantir la qualité, les performances et la fiabilité des solutions de données.

Requirements

Minimum 5 ans d’expérience en Data Engineering.
Excellente maîtrise de Python, SQL, Spark/PySpark et Docker.
Expérience en conception de Data Pipelines, Data Lakes et Data Architectures.
Bonne connaissance des environnements CI/CD, des bases de données et des pratiques de tests.
Une expérience avec Jenkins, Jupyter, Dagster, Superset ou Kubeflow est un atout.
Bon esprit d’équipe et bonnes capacités de communication.

About the company

Nous recherchons un Data Engineer pour rejoindre une équipe d’ingénierie au sein d’un acteur majeur du secteur de la Défense. Vous participerez à la conception, au développement et à l’industrialisation de solutions de traitement de données destinées à des projets technologiques innovants.