Data Engineer H/F

CDI (statut cadre) à Paris IDF. 2 jours de télétravail 3 ans d'expérience sur des missions liées aux pipelines de données, l'ingestion ou le traitement de data. Appétence pour le secteur public. Rémunération selon votre expérience et vos compétences : Autour de 55 K€, Vous rejoindrez notre équipe Services publics, Protection sociale & Santé, qui accompagne les administrations et établissements publics pour mettre l'intérêt général au cœur des transformations numériques. Vous participerez à concevoir, fiabiliser et industrialiser les pipelines de données nécessaires aux usages métiers, tout en facilitant la collaboration avec les équipes et en contribuant à la diffusion d'une culture data., Concevoir, développer et optimiser des pipelines de données :

• Construire des pipelines d'ingestion automatisés (API, batch, fichiers, etc.) dans une logique d'évolutivité.
• Développer des transformations robustes et scalables en Python, orchestrées avec un outil de gestion de workflows.
• Mettre en place des tests unitaires, des contrôles de qualité automatisés et des mécanismes d'alerte.

Modéliser, charger et industrialiser dans une démarche CI/CD :

• Concevoir des modèles de données adaptés aux usages et les implémenter dans l'outil adapté.
• Industrialiser les chargements via des workflows et assurer la cohérence des flux entre les environnements.
• Surveiller en temps réel les exécutions, diagnostiquer les causes d'échec et proposer des corrections durables.
• Collaborer avec les équipes techniques pour la résolution des incidents et l'amélioration continue des traitements.

Appuyer le support et accompagner les utilisateurs :

• Assurer un appui de niveau 2/3 (analyse de logs, relance de jobs, correctifs rapides).
• Documenter les anomalies, tracer les écarts et veiller à la qualité et la disponibilité des données.
• Recueillir les besoins métiers liés aux données et contribuer à la fiabilité des chaînes de traitement.

Do you have experience in Spark?, Formation et expérience

• Vous êtes diplômé(e) d'un Bac+5 (école d'ingénieurs, master universitaire ou école spécialisée en data).
• Vous justifiez d'au moins 3 ans d'expérience sur des missions liées aux pipelines de données, l'ingestion ou le traitement de data.

Savoir-être

• Vous disposez d'excellentes qualités de communication, tant à l'écrit qu'à l'oral.
• Vous savez écouter, analyser et reformuler les besoins métiers ou techniques afin de proposer des solutions pertinentes et techniques.
• Vous êtes autonome, rigoureux et structuré dans vos démarches d'investigation et de résolution de problèmes.

Compétences techniques

• Vous maîtrisez Python ainsi que l'orchestration de workflow tels qu'Airflow ou équivalent.
• Vous savez mener des investigations approfondies (analyse de logs et de métadonnées, reproduction d'erreurs, validation de la documentation).
• Vous disposez d'une bonne connaissance des bases de données SQL.
• Une expérience cloud (AWS, Azure, GCP) ou Big Data (Spark, Databricks, etc.) est un plus

Informations supplémentaires

Process rapide

Dans le TOP10 des Sociétés de Conseil en Ingénierie en France, le Groupe SCALIAN intervient sur des activités de services en management de projets industriels, supply chain, architecture et développement de systèmes numériques embarqués, applicatifs de systèmes d'information et d'Intelligence artificielle dans des secteurs d'activité aussi variés que l'aéronautique, le spatial, l'automobile, le ferroviaire, les services, le luxe ou le retail etc. Créée en 1989, SCALIAN compte aujourd'hui plus de 5500 collaborateurs répartis dans 11 pays et 15 implantations en France pour un chiffre d'affaires de 550 millions d'euros. SCALIAN travaille pour des grands Groupes du CAC40 sur des projets en AT ou au forfait. Labellisée Great Place to Work, SCALIAN connait une croissance de 20% chaque année. Pourquoi SCALIAN ? * Parce que Scalian vous accompagne dans le développement de votre carrière : programme d'onboarding complet sur 1 an avec votre manager et votre RH, programmes de formation personnalisés, communautés techniques, événements internes * Parce que Scalian favorise la Qualité de Vie au Travail : certifications Great Place to Work® et Best Workplaces for Women, prime de cooptation, prime vacances, accord télétravail * Parce que Scalian développe une politique RSE concrète et ambitieuse : mobilité durable, actions environnementales, actions handicap (accord agréé, processus de recrutement inclusif, formation des managers et des recruteurs, mission handicap avec temps dédié : missionhandicap@scalian.com), Au sein du groupe SCALIAN, la division Scalian Consulting constitue une nouvelle organisation de 200 consultants réunissant les activités de : * Noveane, cabinet de conseil spécialisé dans l'alignement stratégique, le pilotage et la mise en œuvre des transformations digitales notamment dans le secteur public (Etat et territoires), la protection sociale, les banques et assurances. * OneFirst, cabinet de conseil en management des systèmes d'information et transformation numérique opérant principalement dans les secteurs de la mode, du luxe et du retail.