Data Engineer Databricks / AWS
Role details
Job location
Tech stack
Job description
En tant que Data Ingénieur confirmé, vous aurez pour mission de concevoir, construire et maintenir des architectures de données fiables et à grande échelle.
Sous la responsabilité de votre manager, vous serez amené(e) à :
- Concevoir et implémenter des pipelines de données robustes et scalable, en utilisant des outils tels que Spark, Airflow et Databricks ;
- Gérer et optimiser notre environnement Cloud AWS pour le stockage et le traitement des données ;
- Assurer la qualité et l'intégrité des données en mettant en place des stratégies de tests et de validation ;
- Collaborer avec les équipes techniques et métier pour comprendre leurs besoins en données et les accompagner dans la réalisation de leurs objectifs ;
- Contribuer à l'amélioration continue de notre culture du Big Data, en partageant les meilleures pratiques et en restant à l'affût des dernières tendances technologiques ;
- Intervenir sur l'ensemble de la chaîne de production data en mettant en oeuvre les pipelines d'ingestion de données (de multiples sources et dans différents formats), stockage, transformation, etc ;
- Assurer la maintenance en conditions opérationnelles (MCO) des systèmes de données existants, en garantissant leur performance et leur évolution en réponse aux besoins de l'entreprise ;
- Proposer des améliorations pour optimiser la plateforme de données (optimisation de traitements existants, restructuration de données, factorisation, etc.) ;
- Bien documenter les développements selon les standards de l'équipe., Rejoignez SMART TEEM ! Rejoignez une équipe jeune, dynamique et engagée !
Devenez un Smart'Collab et bénéficiez d'une gestion de votre carrière personnalisée :
Manager de carrière :
- Définition des objectifs annuels
- Suivi régulier des activités
- Évaluation annuelle
Requirements
- Python : niveau confirmé
- Spark : niveau confirmé
- Cloud AWS : niveau confirmé
- Airflow : niveau confirmé
- Big Data : notions de base (culture du big data)
- Databricks : niveau confirmé
- SQL : niveau confirmé
- Gitlab : niveau intermédiaire
- Anglais : courant
- Connaissance en méthode agile (SCRUM)
En plus de vos compétences techniques, vous êtes doté(e) d'un bon esprit d'équipe, d'une excellente capacité de communication et d'adaptation. Vous avez également une forte capacité d'analyse et de résolution de problèmes et faites preuve de rigueur et d'engagement.
Vous êtes diplômé(e) d'un BAC + 5 (Master 2 ou école d'ingénieurs) et avez au minimum 2 ans d'expérience dans ce domaine.
Benefits & conditions
Les avantages chez SMART TEEM :
- 2 à 3 jours de télétravail par semaine
- Prime télétravail de 32,70€ par mois
- 75 % remboursement de votre titre de transport tous les mois en IDF / 50% hors IDF
- CSE en ligne (Swile) accessible à tout moment
- Subvention de 20€ par mois cumulable (240€ annuellement) : remboursement sur facture pour des activités culturelles, sportives, voyages…
- Congé d'ancienneté dès 2 ans : 1 jour à partir de 2 ans, 2 jours à partir de 3 ans, 3 jours à partir de 4 ans, etc
- Mutuelle prise en charge à 100% pour vous et vos ayants droits.
Type d'emploi : Temps plein, CDI
Rémunération : 45 000,00€ à 65 000,00€ par an
Avantages :
- Prise en charge du transport quotidien
- RTT
- Travail à domicile occasionnel
Lieu du poste : Télétravail hybride (92500 Rueil-Malmaison)