Data Engineer Confirmé GCP F/H
Role details
Job location
Tech stack
Job description
En interaction avec les membres de l'équipe, la prestation consiste à :
- Participer activement aux différentes phases de conception, de planification et de réalisation des tâches avec l'équipe fait partie des missions, tout comme la construction et la maintenance de pipelines data robustes et scalables. Il s'agit également d'accompagner les membres de l'équipe dans l'exploitation et le requêtage des données, en veillant à organiser et structurer efficacement leur stockage.
- Le rôle implique par ailleurs de mettre en place et de maintenir des infrastructures scalables capables de répondre aux besoins et à l'accroissement rapide du volume de données, ainsi que de construire et maintenir les workflows de CI/CD. Une collaboration étroite avec les autres data ingénieurs est attendue afin de partager les bonnes pratiques en vigueur.
- Il est aussi essentiel d'assurer l'évolutivité, la sécurité et la stabilité des environnements, tout en participant aux différentes instances dédiées aux data ingénieurs. Enfin, la contribution à la mise à jour de la documentation ainsi qu'une veille technologique active dans le domaine font pleinement partie des responsabilités.
Requirements
La mission requiert au moins sept ans d'expérience en qualité de Data Ingénieur dans un environnement data, notamment en matière de structures de données, de développement et d'architecture. Une expérience avérée dans la conception et la mise en œuvre de pipelines data est attendue, tout comme une bonne maîtrise de l'environnement cloud Google (GCP), incluant notamment BigQuery et Dataplex Universal Catalog.
Vous devez également justifier d'expériences avec les langages Python et SQL, ainsi qu'avec des technologies telles que Spark et Delta Lake. La maîtrise d'outils d'infrastructure et de déploiement comme Terraform et Terragrunt est nécessaire, de même que l'utilisation de GitLab et des workflows GitLab CI/CD.
Au-delà des compétences techniques, la capacité à vulgariser et à communiquer sur des sujets techniques constitue un atout important.
La prestation implique par ailleurs une présence sur site en fonction des besoins, avec un minimum équivalent à 50 % du temps de mission.