Tech Lead Data Platform Cloud - AWS / Databricks / Terraform

CONCRETIO SERVICES
Paris, France
yesterday

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
French
Experience level
Senior

Job location

Paris, France

Tech stack

Microsoft Active Directory
API
Amazon Web Services (AWS)
Amazon Web Services (AWS)
Audit Trail
Code Review
Continuous Integration
Data Infrastructure
DevOps
Github
Identity and Access Management
Python
Key Management
OAuth
Role-Based Access Control
Cloud Services
Management of Software Versions
Delivery Pipeline
Amazon Web Services (AWS)
Backend
Data Lake
Gitlab-ci
Amazon Web Services (AWS)
Terraform
User Administration
Databricks

Job description

Développer les scripts Terraform provisionnant l'ensemble des services AWS de la plateforme (IAM, S3, KMS, CloudTrail, VPC) et créer des templates réutilisables

Gérer les règles de configuration AWS et les règles de paramétrage des données (versioning S3, intégrité, chiffrement)

Services Backend Transverses

Développer les APIs backend assurant la gestion des utilisateurs et les services transverses du socle IDON

Implémenter AWS CloudTrail et la journalisation pour la traçabilité et le diagnostic d'incidents

CI/CD & DevOps

Construire et maintenir les pipelines CI/CD garantissant la fiabilité et la scalabilité de la plateforme

Configurer et maintenir les règles de protection des données (gestion des clés KMS, rotation automatique)

FinOps

Outiller le FinOps à tous les niveaux de granularité : infrastructure AWS, services tiers, licences et coûts Databricks (DBUs, clusters)

Suivre et analyser les coûts pour identifier les opportunités d'optimisation

Gouvernance des Accès

Développer et maintenir les services de gestion des accès à la donnée, branchés à l'Active Directory entreprise

Définir et implémenter les processus de gouvernance des accès en lien avec les équipes sécurité et IT

Animation Technique & Offre de Service

Animer techniquement l'équipe de 10 personnes (code reviews, montée en compétences, arbitrages) sans lien hiérarchique

Rédiger les parcours utilisateur pour les profils Data (Data Engineer, Data Analyst) et contribuer à la gouvernance Architecture

Suivre les releases Databricks, proposer des accélérateurs aux équipes Data Products

Requirements

8 à 12 ans d'expérience, dont au moins 4 à 5 ans sur des Data Platforms Cloud et une expérience confirmée en position de Tech Lead ou référent technique d'équipe

Expérience simultanée Build + MCO sur une plateforme en production

Expérience d'animation d'équipes mixtes (client + prestataire) sans autorité hiérarchique

FinOps Databricks : l'outillage des coûts DBUs et clusters est non-trivial

Intégration Active Directory pour la gouvernance des accès data, Terraform / IaC (++) : Modules avancés, gestion du state, providers AWS, templates réutilisables, configuration IAM/S3/KMS/VPC/CloudTrail ? niveau Tech Lead : conception ET implémentation

AWS Data Platform (++) : S3, IAM, KMS, CloudTrail, VPC, AWS Budgets/Cost Explorer ? configuration de sécurité, gouvernance, traçabilité et optimisation des coûts sur une Data Platform en production

Databricks (++) : Administration de workspace, Unity Catalog, gestion des clusters, Delta Lake, gestion des coûts DBUs et licences

APIs Backend & Python (++) : Développement d'APIs de gestion des utilisateurs et de services transverses, scripts d'automatisation infrastructure

CI/CD (++) : Pipelines de déploiement de Data Platform (GitHub Actions, GitLab CI ou AWS CodePipeline selon le contexte), intégration des tests et des contrôles de sécurité

FinOps Databricks & AWS (++) : Outillage du suivi des coûts à granularité fine (infrastructure, services, licences Databricks), identification des leviers d'optimisation

Gouvernance des Accès & Active Directory : Intégration de l'AD entreprise pour la gestion des accès à la donnée, patterns d'authentification (OAuth2, OIDC), RBAC sur la Data Platform

Apply for this position