Data Engineer Python - Spark Expérimenté H/F

Labsoft
Nantes, France
10 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Expert
Experience required
5 years minimum
Working hours
Regular working hours

Tech stack

Agile Methodology Data Analysis Confluence JIRA Microsoft Azure Cloud Computing Software Quality Code Review Human-Computer Interaction Python (Programming Language) Scrum Methodology Software Engineering
+8 more
SQL Databases Apache Spark Git Pyspark Atlassian Tools Data Management Streamlit Framework Databricks

Job description

Dans le cadre d’un programme stratégique de valorisation de la donnée, nous recherchons un(e) Data Engineer Python / Spark expérimenté(e) pour rejoindre le Data Studio d’un grand acteur du secteur des transports. Vous intégrerez une équipe Agile composée de Data Engineers, Analytics Engineers, Product Owners et Data Managers afin de concevoir et développer des applications Data innovantes. Vous évoluerez dans un environnement technique moderne où la qualité logicielle, la performance des traitements et l’amélioration continue sont au coeur des projets.

Votre mission :

  • Participer à l’analyse des besoins fonctionnels et techniques.
  • Concevoir, développer et maintenir des applications Data répondant aux besoins métiers.
  • Développer des traitements de données performants avec Python et Apache Spark.
  • Concevoir des interfaces utilisateurs et des outils de visualisation avec Streamlit.
  • Optimiser les performances et la maintenabilité des traitements de données.
  • Garantir la qualité du code en appliquant les bonnes pratiques de développement, les tests et les revues de code.
  • Collaborer avec les équipes Data et les Product Owners afin de garantir la qualité des livraisons.
  • Participer activement aux cérémonies Agile et être force de proposition sur les choix techniques et les évolutions des applications.

Environnement technique, Nous rejoindre c’est d’abord un projet de carrière avec de la valeur, de l’envie et du plaisir à travailler ensemble mais c’est aussi :

  • La contribution à la co-création de l’entreprise à travers les LabSoft Building, afterworks réguliers ;
  • Le versement de la Participation issue de la forte volonté de partager nos réussites
  • Des primes de cooptation ;
  • La prise en charge des frais de transport à 50% & prime vélo, pour les plus courageux ;
  • Au bénéfice de votre temps libre : des RTT, une prime de vacances, la possibilité de télétravailler ;
  • Des primes complémentaires pour toute certification réussie
  • De l’aide pour votre installation et vos projets immobiliers.

Requirements

Python

  • Apache Spark
  • Streamlit
  • SQL
  • Azure
  • Databricks
  • Git
  • Jira
  • Confluence
  • Méthodologie Agile / Scrum, Plus de 5 ans d’expérience en développement Python ou Data Engineering.
  • Excellente maîtrise de Python, Apache Spark et SQL.
  • Expérience du développement d’applications Data ou d’outils de visualisation avec Streamlit.
  • Bonne connaissance des environnements Cloud, idéalement Azure et Databricks.
  • Sensibilité à la qualité logicielle, aux tests et aux bonnes pratiques de développement.
  • Capacité à travailler en équipe Agile, à partager ses connaissances et à être force de proposition.
  • Autonomie, rigueur, curiosité technique et excellent relationnel.

Les + de la mission :

  • Projet stratégique au sein d’un grand groupe du secteur des transports.
  • Intégration au Data Studio, au coeur des projets de transformation Data.
  • Environnement technique moderne autour de Python, Spark, Azure, Databricks et Streamlit.
  • Collaboration avec des équipes expertes dans un contexte Agile favorisant le partage de connaissances., Apache spark Force de proposition Confluence SQL Gestion des données Git Sens du relationnel Python Scrum Autonomie Jira Amélioration continue

Benefits & conditions

Mission longue durée offrant une forte visibilité sur les projets Data du groupe.

  • Poste basé à Lyon, avec télétravail possible 2 jours par semaine.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

6:21 min

Investigating push inefficiencies with upstream Git experts

Jonathan Creamer · Coffee With Developers

3:05 min

Integrating an assistant application with Jira software

Felix Augenstein · LIVE

4:32 min

Harnessing Spark with Python using PySpark and Py4J

Ayon Roy · LIVE

1:34 min

Bringing diverse skills to industrial data science roles

Katja Träumner

56 sec

Favorite git commands and the importance of patch commits

Eileen Uchitelle Eileen Uchitelle +1 · Coffee With Developers

Videos

See all

Related articles

See all