Data Engineer H/F

Groupe INTM
Lyon, France
6 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
French
Experience level
Junior
Compensation
€ 40K

Job location

Remote
Lyon, France

Tech stack

Microsoft Windows
Agile Methodologies
Amazon Web Services (AWS)
Data analysis
Unit Testing
Bash
Unix
Continuous Integration
ETL
Data Transformation
Data Warehousing
Database Design
Hadoop
Hive
Python
Microsoft Office
Microsoft SQL Server
Oracle Applications
Power BI
Shell Script
SQL Databases
Microsoft Power Automate
Informatica Powercenter
Spark
GIT
Powerquery
PySpark
Vba Programming Language
Apache Nifi
ServiceNow
Databricks

Job description

  • Développer, maintenir et optimiser les traitements Data de la plateforme KALIPSAU.
  • Garantir la qualité, la performance et la maintenabilité des flux.
  • Assurer la MCO (flux, traitements, restitutions).
  • Mettre en place des tests, du CI/CD et des bonnes pratiques.
  • Contribuer à l'amélioration continue des processus, de l'architecture et des outils.
  • Accompagner la montée en compétence de l'équipe Data., Développement & Transformation des données
  • Développer, optimiser et documenter les pipelines : Power Automate, Databricks, Power BI.
  • Construire des flux de transformation de bout en bout, en appliquant les bonnes pratiques Data.
  • Mettre en place des tests unitaires et contrôles qualité systématiques.
  • Uniformiser, nettoyer et améliorer en continu le code existant.

CI/CD & Environnements

  • Mettre en place et gérer les pipelines de déploiement Databricks / Power BI.
  • Administrer les environnements DEV / REC / PRD et fiabiliser les cycles de déploiement.

Exploitation & MCO

  • Participer à la MCO de la plateforme : surveillance des flux, résolution des incidents, optimisation des traitements.
  • Contribuer aux évolutions des flux provenant de sources variées (ITSM, téléphonie, …).

Collaboration & Gouvernance

  • Travailler avec le responsable Data, le Data Analyst, l'infrastructure, les équipes flux et les clients internes.
  • Justifier les choix techniques, rendre compte de l'activité, proposer des améliorations.
  • Documenter les développements et accompagner l'équipe dans la prise en main des technologies., Livrables attendus
  • Développements et optimisations des traitements KALIPSAU.
  • Pipelines de déploiement fonctionnels (Databricks / Power BI).
  • Documentation technique associée.
  • Contribution à la qualité, la performance et la fiabilité globale de la plateforme.

Requirements

Do you have experience in VBA?, Vous possédez une solide expérience dans le domaine industriel ou technologique avec une maîtrise approfondie des compétences suivantes : AWS, Java, Microsoft SQL Server, Database design, Hadoop, VBA, Informatica, Data warehouse, Spark, ETL, SQL, Python, Oracle, Shell Scripting (Bash/Unix), Apache Hive. La connaissance des environnements Agile ainsi que d'analyse de données constitue un atout majeur. Vous faites preuve d'un excellent sens de l'analyse et de la résolution de problèmes techniques complexes. Vous êtes capable de travailler efficacement en équipe tout en étant autonome dans la gestion de vos missions. Une forte capacité à communiquer clairement avec différents interlocuteurs est essentielle pour réussir dans ce poste. Nous recherchons un(e) candidat(e) motivé(e), rigoureux(se) et ayant une réelle appétence pour l'innovation technologique afin d'assurer la performance optimale du site industriel., Expérience

  • Minimum 3 ans dans la Data
  • Minimum 1 an en tant que Data Engineer
  • Expérience en environnement complexe, multi-acteurs, multi-sources

Compétences techniques indispensables

  • Python, PySpark, SQL, DAX, Power Query
  • Databricks, Nifi
  • Power BI (avancé)
  • Git
  • Power Automate
  • Connaissance d'un outil ITSM (ServiceNow apprécié)
  • Environnement Microsoft / Windows / Office 365

Aptitudes & soft skills

  • Excellente autonomie
  • Esprit d'analyse et de synthèse
  • Capacité à expliquer, former et rendre compte
  • Aisance pour évoluer dans un environnement projet complexe
  • Force de proposition et regard critique

Benefits & conditions

Type d'emploi : CDI

Rémunération : 38 000,00€ à 40 000,00€ par an

Avantages :

  • Intéressement et participation
  • Prise en charge du transport quotidien
  • RTT
  • Travail à domicile occasionnel

Lieu du poste : Télétravail hybride (Lyon (69))

Apply for this position