Senior Data And ai Engineer - Databricks H/F

Propertyvalue
Roubaix, France
6 days ago
Apply on www.hellowork.com
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Expert
Working hours
Regular working hours
Languages
English

Tech stack

Application Programming Interfaces (APIs) Artificial Intelligence Microsoft Azure Code Generation Continuous Integration Data Governance Extract Transform Load (ETL) Python (Programming Language) Scrum Methodology Power BI SQL Databases Large Language Models
+3 more
Git Data Lakes Databricks

Job description

Construire, industrialiser et faire évoluer la plateforme Lakehouse.

  • Accélérer le delivery tout en sécurisant qualité, gouvernance et reporting PowerBI (PBIT/PBIP).
  • Mettre en oeuvre et maintenir la conception, l’industrialisation et l’évolution des solutions data et IA sur la plateforme Lakehouse.
  • Garantir la robustesse, la performance, la sécurité et la qualité des données au service des usages métiers, analytiques et IA.
  • Valoriser la donnée en couche Gold et développer le reporting Power BI au plus près des métiers.
  • Construire les datasets / modèles nécessaires à des restitutions Power BI fiables, performantes et gouvernées.
  • Concevoir et optimiser des architectures data sur Databricks.
  • Maîtriser Delta Lake, Unity Catalog, Workflows, Jobs et Notebooks.
  • Garantir performance, scalabilité et optimisation des coûts.
  • Concevoir des modèles analytiques et décisionnels robustes.
  • Définir faits, dimensions, granularité et historisation (SCD).
  • Assurer cohérence, unicité et maintenabilité des modèles.
  • Traduire les besoins métiers en structures data.
  • Développer et fiabiliser des pipelines ELT/ETL.
  • Superviser les tests, validations et mises en production en CI/CD.
  • Exploiter Databricks avec Genie et LLMs ainsi que le développement PowerBI pour accélérer la production tout en maintenant un haut niveau d’exigence (qualité, sécurité, maintenabilité).
  • Implémenter et superviser les contrôles de Data Quality.
  • Structurer la gestion des anomalies et rejets.
  • Diffuser les standards et collaborer étroitement avec PO, Architectes et Data Stewards.

Outils & Environnement

  • Expertise avancée Databricks / Delta Lake / Lakehouse / Genie.
  • Maîtrise du développement augmenté par l’IA et les agents, génération de code, refactoring, tests, documentation.
  • Maîtrise des langages de développement Python et SQL.
  • Expertise PowerBI PBIT/PBIP.

Requirements

Renforcement de la Data Forge sur un profil immédiatement opérationnel., Pratique d’un framework agile de type Scrum.

  • Maîtrise CI/CD & Git (Azure DevOps).
  • APIs et intégration.
  • Anglais niveau B2.
  • Connaissances ITIL.
  • Expertise en modélisation de données du Lakehouse et connaissance des modèles métiers de l’immobilier., Profil recherchéIngénieur ou Master 2 en informatique, en data science ou statistiquesExpertise avancée Databricks, Lakehouse, GenieMaîtrise de Delta Lake, Unity Catalog, Workflows, Jobs et NotebooksCompétences en modélisation et conception de la donnée (faits, dimensions, granularité, historisation SCD)Expérience en industrialisation et Data Engineering avec pipelines ELT/ETL et CI/CDMaîtrise du développement augmenté par l’IA (Genie, LLMs) et développement PowerBICompétences en qualité et gouvernance des données, gestion des anomalies et rejetsLeadership et capacité à collaborer avec PO, Architectes et Data StewardsMaîtrise des langages de développement Python et SQLExpertise PowerBI PBIT/PBIPPratique d’un framework agile de type ScrumMaîtrise de CI/CD & Git (Azure DevOps)Connaissance des APIs et intégrationAnglais niveau B2 et connaissances ITILExpertise en modélisation de données du Lakehouse et connaissance des modèles métiers de l’immobilierQualités personnelles : collaboration transverse, autonomie, agilité, esprit de structuration, qualité et amélioration continue, état d’esprit gagnant-gagnant, acteur de la transformation, état d’esprit inclusif, 1. Ingénieur ou Master 2 en informatique, en data science ou statistiques
  1. Expertise avancée Databricks, Lakehouse, Genie
  2. Maîtrise de Delta Lake, Unity Catalog, Workflows, Jobs et Notebooks
  3. Compétences en modélisation et conception de la donnée (faits, dimensions, granularité, historisation SCD)
  4. Expérience en industrialisation et Data Engineering avec pipelines ELT/ETL et CI/CD
  5. Maîtrise du développement augmenté par l’IA (Genie, LLMs) et développement PowerBI
  6. Compétences en qualité et gouvernance des données, gestion des anomalies et rejets
  7. Leadership et capacité à collaborer avec PO, Architectes et Data Stewards
  8. Maîtrise des langages de développement Python et SQL
  9. Expertise PowerBI PBIT/PBIP
  10. Pratique d’un framework agile de type Scrum
  11. Maîtrise de CI/CD & Git (Azure DevOps)
  12. Connaissance des APIs et intégration
  13. Anglais niveau B2 et connaissances ITIL
  14. Expertise en modélisation de données du Lakehouse et connaissance des modèles métiers de l’immobilier
  15. Qualités personnelles : collaboration transverse, autonomie, agilité, esprit de structuration, qualité et amélioration continue, état d’esprit gagnant-gagnant, acteur de la transformation, état d’esprit inclusif

EUR

Unity Anglais ETL Intelligence artificielle API SQL Optimisation des coûts Modélisation des données Power BI Git Python Scrum Autonomie Gouvernance des données Amélioration continue ITIL

Benefits & conditions

Taux journalier :Salaire selon profil

About the company

Leader Data Forge.

  • Data Engineer, Product Owner, Architecte Data, Data Steward, Responsables d’Applications IT, Chefs de Projets IT, Data Community Manager, Data Analyst, Chief Data Officer, Partenaires IT.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com
Prepare application

Good distractions

Loading talks and stories from around this role…