Data Engineer Junior

Eridanis
Paris, France
18 days ago
Apply on www.welcometothejungle.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Starter
Working hours
Regular working hours

Tech stack

Airflow Advanced Message Queuing Protocol Software Quality Continuous Integration Extract Transform Load (ETL) Data Retrieval Software Debugging Python (Programming Language) Machine Learning Message Queuing Telemetry Transport (MQTT) Prometheus DataOps
+8 more
Large Language Models Grafana Backend Fastapi Gitlab-ci Kubernetes Machine Learning Operations Docker

Job description

Ci aprĂšs des exemples concrets dans la Smart-City :

  • Optimisation des consommations Ă©nergĂ©tiques des bĂątiments Ă  l’échelle du territoire,
  • RĂ©cupĂ©rations des donnĂ©es des capteurs IoT pour fournir des services de propretĂ© urbaine,
  • Construction de jeux de donnĂ©es permettant de faire des Ă©tudes dĂ©mographiques,

Selon les projets, vous pourrez contribuer ponctuellement à l’industrialisation de briques IA (NLP/LLM notamment), mais ce n’est pas le cƓur du rîle.

La diversitĂ© de nos clients et de leurs besoins implique des projets trĂšs variĂ©s : nouvelles sources, contraintes et patterns d’intĂ©gration.

Ce qu’on fait au quotidien dans ce rîle

  • Ateliers avec les clients/Ă©quipes mĂ©tier pour vĂ©rifier qu’on a les bonnes donnĂ©es, au bon niveau de qualitĂ©, pour rĂ©pondre au besoin.
  • RĂ©cupĂ©ration de donnĂ©es transverses depuis des sources variĂ©es (dont IoT).
  • Standardisation et structuration orientĂ©es “produit” en coordination avec les Ă©quipes dev.
  • Mise en place de rĂšgles de qualitĂ©, de monitoring et d’alerting sur les flux ETL.
  • Investigation d’incidents (volumĂ©trie, latence, ruptures de qualitĂ©), durcissement des pipelines.

Stack & environnement

  • ETL / orchestration : Flyte
  • Backend / services : Python, FastAPI
  • DĂ©ploiement : Docker, Kubernetes (clusters on-prem managĂ©s)
  • ObservabilitĂ© : Prometheus, Grafana
  • CI/CD : GitLab CI
  • Standards (selon projets IoT) : FIWARE / NGSI-LD
  • Packaging Python : librairies internes rĂ©utilisables (wrappers, modĂšles, utilitaires), * Orchestrateurs (Flyte, Airflow, Dagster, Prefect
).
  • IoT / messaging (MQTT/AMQP)
  • Standards FIWARE/NGSI-LD.
  • Notions MLOps/ML engineering (mise en prod, suivi, Ă©valuation simple).
  • Connaissances GPU (nice-to-have, non requis).

Requirements

  • TrĂšs bon niveau en Python (qualitĂ© logicielle, tests, packaging).
  • À l’aise avec Docker + les bases Kubernetes (dĂ©ploiement, logs, debug).
  • SensibilitĂ© “prod” : monitoring / alerting, analyse d’incidents, rigueur sur la qualitĂ© des flux., Logiquement, nous attendons une forte appĂ©tence en data engineering : ingestion, transformations, fiabilisation, gestion d’erreurs, rejouabilitĂ©. Cependant, voici d’autres critĂšres que nous recherchons au sein des profils :
  • Esprit critique, autonomie, sens du concret.
  • Rigueur sur la qualitĂ© de donnĂ©es et la robustesse en production.
  • CuriositĂ© et envie de faire Ă©voluer l’outillage / les pratiques DataOps

About the company

Vous rejoignez une équipe qui construit et opÚre des flux de données industriels alimentant des applications métiers pour le secteur public, en particulier les collectivités et territoires.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.welcometothejungle.com
Prepare application

Good distractions

Loading talks and stories from around this role