Data Engineer H/F
Role details
Job location
Tech stack
Job description
- Développer, maintenir et optimiser les traitements Data de la plateforme KALIPSAU.
- Garantir la qualité, la performance et la maintenabilité des flux.
- Assurer la MCO (flux, traitements, restitutions).
- Mettre en place des tests, du CI/CD et des bonnes pratiques.
- Contribuer à l'amélioration continue des processus, de l'architecture et des outils.
- Accompagner la montée en compétence de l'équipe Data., Développement & Transformation des données
- Développer, optimiser et documenter les pipelines : Power Automate, Databricks, Power BI.
- Construire des flux de transformation de bout en bout, en appliquant les bonnes pratiques Data.
- Mettre en place des tests unitaires et contrôles qualité systématiques.
- Uniformiser, nettoyer et améliorer en continu le code existant.
CI/CD & Environnements
- Mettre en place et gérer les pipelines de déploiement Databricks / Power BI.
- Administrer les environnements DEV / REC / PRD et fiabiliser les cycles de déploiement.
Exploitation & MCO
- Participer à la MCO de la plateforme : surveillance des flux, résolution des incidents, optimisation des traitements.
- Contribuer aux évolutions des flux provenant de sources variées (ITSM, téléphonie, …).
Collaboration & Gouvernance
- Travailler avec le responsable Data, le Data Analyst, l'infrastructure, les équipes flux et les clients internes.
- Justifier les choix techniques, rendre compte de l'activité, proposer des améliorations.
- Documenter les développements et accompagner l'équipe dans la prise en main des technologies., Livrables attendus
- Développements et optimisations des traitements KALIPSAU.
- Pipelines de déploiement fonctionnels (Databricks / Power BI).
- Documentation technique associée.
- Contribution à la qualité, la performance et la fiabilité globale de la plateforme.
Requirements
Do you have experience in VBA?, Vous possédez une solide expérience dans le domaine industriel ou technologique avec une maîtrise approfondie des compétences suivantes : AWS, Java, Microsoft SQL Server, Database design, Hadoop, VBA, Informatica, Data warehouse, Spark, ETL, SQL, Python, Oracle, Shell Scripting (Bash/Unix), Apache Hive. La connaissance des environnements Agile ainsi que d'analyse de données constitue un atout majeur. Vous faites preuve d'un excellent sens de l'analyse et de la résolution de problèmes techniques complexes. Vous êtes capable de travailler efficacement en équipe tout en étant autonome dans la gestion de vos missions. Une forte capacité à communiquer clairement avec différents interlocuteurs est essentielle pour réussir dans ce poste. Nous recherchons un(e) candidat(e) motivé(e), rigoureux(se) et ayant une réelle appétence pour l'innovation technologique afin d'assurer la performance optimale du site industriel., Expérience
- Minimum 3 ans dans la Data
- Minimum 1 an en tant que Data Engineer
- Expérience en environnement complexe, multi-acteurs, multi-sources
Compétences techniques indispensables
- Python, PySpark, SQL, DAX, Power Query
- Databricks, Nifi
- Power BI (avancé)
- Git
- Power Automate
- Connaissance d'un outil ITSM (ServiceNow apprécié)
- Environnement Microsoft / Windows / Office 365
Aptitudes & soft skills
- Excellente autonomie
- Esprit d'analyse et de synthèse
- Capacité à expliquer, former et rendre compte
- Aisance pour évoluer dans un environnement projet complexe
- Force de proposition et regard critique
Benefits & conditions
Type d'emploi : CDI
Rémunération : 38 000,00€ à 40 000,00€ par an
Avantages :
- Intéressement et participation
- Prise en charge du transport quotidien
- RTT
- Travail à domicile occasionnel
Lieu du poste : Télétravail hybride (Lyon (69))