Data Engineer d'Expérience Minimum H/F

Scalian Groupe
Neuilly-sur-Seine, France
1 day ago
Apply on candidat.francetravail.fr
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Experienced
Experience required
3 years minimum
Working hours
Regular working hours

Tech stack

Application Programming Interfaces (APIs) Airflow Amazon Web Services Unit Testing Microsoft Azure Big Data Cloud Computing Continuous Integration Python (Programming Language) Log Analysis Google Cloud Apache Spark
+1 more
Databricks

Job description

Concevoir, développer et optimiser des pipelines de données :

  • Construire des pipelines d’ingestion automatisés (API, batch, fichiers, etc.) dans une logique d’évolutivité.

  • Développer des transformations robustes et scalables en Python, orchestrées avec un outil de gestion de workflows.

-Mettre en place des tests unitaires, des contrôles de qualité automatisés et des mécanismes d’alerte.

Modéliser, charger et industrialiser dans une démarche CI/CD :

  • Concevoir des modèles de données adaptés aux usages et les implémenter dans l’outil adapté.

  • Industrialiser les chargements via des workflows et assurer la cohérence des flux entre les environnements.

  • Surveiller en temps réel les exécutions, diagnostiquer les causes d’échec et proposer des corrections durables.

  • Collaborer avec les équipes techniques pour la résolution des incidents et l’amélioration continue des traitements.

Appuyer le support et accompagner les utilisateurs :

  • Assurer un appui de niveau 2/3 (analyse de logs, relance de jobs, correctifs rapides).

  • Documenter les anomalies, tracer les écarts et veiller à la qualité et la disponibilité des données.

  • Recueillir les besoins métiers liés aux données et contribuer à la fiabilité des chaînes de traitement.

Process rapide

Labellisé Great Place to Work pour la 5éme année !

Requirements

Vous êtes diplômé(e) d’un Bac +5 (école d’ingénieurs, master universitaire ou école spécialisée en data).

  • Vous justifiez d’au moins 3 ans d’expérience sur des missions liées aux pipelines de données, l’ingestion ou le traitement de data.

Savoir-être

  • Vous disposez d’excellentes qualités de communication, tant à l’écrit qu’à l’oral.

  • Vous savez écouter, analyser et reformuler les besoins métiers ou techniques afin de proposer des solutions pertinentes et techniques.

  • Vous êtes autonome, rigoureux et structuré dans vos démarches d’investigation et de résolution de problèmes.

Compétences techniques

  • Vous maîtrisez Python ainsi que l’orchestration de workflow tels qu’Airflow ou équivalent.

  • Vous savez mener des investigations approfondies (analyse de logs et de métadonnées, reproduction d’erreurs, validation de la documentation).

  • Vous disposez d’une bonne connaissance des bases de données SQL.

  • Une expérience cloud (AWS, Azure, GCP) ou Big Data (Spark, Databricks, etc.) est un plus

About the company

Vous rejoindrez notre équipe Services publics, Protection sociale & Santé, qui accompagne les administrations et établissements publics pour mettre l’intérêt général au coeur des transformations numériques. Vous participerez à concevoir, fiabiliser et industrialiser les pipelines de données nécessaires aux usages métiers, tout en facilitant la collaboration avec les équipes et en contribuant à la diffusion d’une culture data., Dans le TOP10 des Sociétés de Conseil en Ingénierie en France, le Groupe SCALIAN intervient sur des activités de services en management de projets industriels, supply chain, architecture et développement de systèmes numériques embarqués, applicatifs de systèmes d’information et d’Intelligence artificielle dans des secteurs d’activité aussi variés que l’aéronautique, le spatial, l’automobile, le ferroviaire, les services, le luxe ou le retail etc.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on candidat.francetravail.fr
Prepare application

Good distractions

Loading talks and stories from around this role…