Data engineer H/F

Dans le cadre du développement d'une petite plateforme local Big Data afin de permettre l'analyse des données sensibles, voici les missions qui vous attendent :

• Développement et organisation de l'espace de stockage Big Data
• Développement de la pipeline automatique de transfert de données entre la plateforme existante et la nouvelle
• Création d'outil d'accès aux données pour les utilisateurs
• Développement de processus automatiques de calcul sur cette nouvelle plateforme*
• Intégration d'outils DevOps sur l'ancienne et la nouvelle chaîne pour faciliter l'intégration et la mise à jour des modules

Do you have experience in Spark?, Diplomé d'une école d'ingénieur, vous avez une première expérience réussie dans un environnement big data.

Compétences souhaitées dans l'idéal :

• Développement Python
• Manipulation de bases SQL (SQLServer dans l'idéal)
• Manipulation de technos Big Data Hadoop/Spark ou HBase ou MapRDB
• Connaissance d'outils de Dashboards comme Spotfire ou PowerBI
• Manipulation d'outils de DevOps (Docker, Kubernetes, Jenkins, ...)

Dans le TOP10 des Sociétés de Conseil en Ingénierie en France, le Groupe intervient sur des activités de services en management de projets industriels, supply chain, architecture et développement de systèmes numériques embarqués, applicatifs de systèmes d'information et d'Intelligence Artificielle dans des secteurs d'activité aussi variés que l'aéronautique, le spatial, l'automobile, le ferroviaire, les services, le luxe ou le retail… Créée en 1989, SCALIAN compte aujourd'hui plus de 5500 collaborateurs répartis dans 11 pays et 15 implantations en France pour un chiffre d'affaires de 550 millions d'euros. SCALIAN travaille pour des grands Groupes du CAC40 sur des projets en AT ou au forfait. Labellisée Grate Place to Work, SCALIAN connait une croissance de 20% chaque année., Politique Handicap : accord agréé, processus de recrutement inclusif, formation des managers, formation des recruteurs, mission handicap avec temps dédié : missionhandicap@scalian.com