Data Engineer Gcp Kafka H/F
- Discuss this with your agent
- Open in Claude
- Open in ChatGPT
Role details
Tech stack
+11 more
Job description
Concevoir et déployer une data plateforme complÚte sur GCP (architecture, sécurité, gouvernance, automatisation).
- Développer et maintenir des pipelines de données robustes (batch & streaming) en utilisant Kafka, Dataflow, Pub/Sub, BigQuery, etc.
- Industrialiser les traitements : CI/CD, monitoring, observabilité, optimisation des performances.
- Assurer la qualité, la disponibilité et la conformité des données (Data Quality, Data Lineage, Data Catalog).
- Encadrer techniquement les Ă©quipes data : mentoring, revue de code, bonnes pratiques, standards dâarchitecture.
- Collaborer avec les équipes produit, BI, IA et sécurité pour garantir une exploitation optimale de la plateforme.
- Participer aux choix technologiques et Ă la roadmap dâĂ©volution de lâĂ©cosystĂšme data.
- Documenter les architectures, flux et modÚles de données pour assurer la pérennité des solutions.
Requirements
Cloud GCP : BigQuery, Dataflow, Pub/Sub, Cloud Storage, Composer, IAM.
- Streaming & Messaging : Kafka (avancé), gestion des topics, partitions, performances, monitoring.
- Développement : Python, Java ou Scala ; frameworks de data processing.
- Orchestration & CI/CD : Airflow, Cloud Composer, GitLab CI, Terraform.
- Data Engineering avancé : modélisation, optimisation SQL, ingestion massive, data quality.
- Architecture : data mesh, data lakehouse, microservices data, sécurité & gouvernance., Leadership technique et capacité à fédérer.
- Forte autonomie et sens de la responsabilité.
- Capacité à vulgariser des sujets complexes.
- Rigueur, sens du détail, orientation performance.
- Esprit collaboratif et culture produit.
Langues
- Anglais obligatoire (Ă©changes internationaux, documentation, rĂ©unions)., Profil recherchĂ©Profil recherchĂ©7 Ă 10 ans dâexpĂ©rience en data engineering.ExpĂ©rience dĂ©montrĂ©e dans la construction dâune data plateforme from scratch.MaĂźtrise des environnements cloud, idĂ©alement GCP.Expertise Kafka indispensable., * 7 Ă 10 ans dâexpĂ©rience en data engineering.
- ExpĂ©rience dĂ©montrĂ©e dans la construction dâune data plateforme from scratch.
- Maßtrise des environnements cloud, idéalement GCP.
- Expertise Kafka indispensable.
EUR
Management dâĂ©quipe Business Intelligence Anglais Scala Google cloud platform SQL Gestion des donnĂ©es Git Batching Python Autonomie KAFKA Terraform QualitĂ© fĂ©dĂ©ratrice Java, Monitoring
Benefits & conditions
Taux journalier :Salaire selon profil
About the company
Le Data IngĂ©nieur Senior pilote la conception, la mise en place et lâĂ©volution dâune data plateforme moderne sur Google Cloud Platform. Il garantit la fiabilitĂ©, la performance et la scalabilitĂ© des pipelines de donnĂ©es, tout en accompagnant les Ă©quipes dans lâadoption des meilleures pratiques data.
Apply for this position
This job is hosted externally. Click below to view the full posting and apply.
Apply on www.hellowork.comGood distractions
Talks and stories from around this role â technically off-topic, practically not.
Moments
Explore playlistsVideos
See allRelated articles
See all
Software Engineer Salary London
Top-Paying Tech Jobs (with Salaries)
Best Companies to Work For in Paris: Top 25 Companies in 2023Â
Where To Find Software Engineering Jobs