Architecte Solution Databricks Senior H/F

Lehibou
Inconnu, France
4 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience level
Expert
Experience required
2 years minimum
Working hours
Regular working hours

Tech stack

Agile Methodology Amazon Web Services Big Data Cloud Computing Data Infrastructure Data Integration Logic Synthesis of Circuits JSON Scrum Methodology Power BI Data Streaming WebKit
+6 more
Parquet Datadog Grafana Apache Spark Kibana Databricks

Job description

Au sein d’un acteur du transport en commun, la mission consiste à intervenir comme référent architecture et Tech Lead auprès des squads projets. Le consultant accompagnera les projets Data de la phase de cadrage jusqu’à la mise en production, en garantissant les choix d’architecture, la qualité des développements et l’application des bonnes pratiques sur un socle AWS / Databricks.

Missions principales / Responsabilités

  • Accompagner les squads métiers dès le cadrage et jusqu’à la mise en service des cas d’usage
  • Challenger les choix techniques et architecturaux des projets
  • Assister les Tech Leads dans la définition des architectures et la rédaction des DAT
  • Concevoir et optimiser des pipelines d’ingestion et de transformation de données
  • Garantir les bonnes pratiques de développement, de performance, de FinOps et d’éco-conception
  • Contribuer à l’amélioration des frameworks et briques techniques de la plateforme
  • Participer au MCO des applications Data et intervenir en support N3
  • Réaliser des PoC, audits techniques et études d’architecture

Livrables attendus

  • Architectures solution
  • DAT
  • Pipelines d’ingestion et de transformation de données
  • PoC
  • Audits techniques
  • Études d’architecture, Architecte Solution / Tech Lead Data disposant d’une forte expertise Databricks et Data Engineering sur Cloud AWS.

Le profil doit être capable de prendre de la hauteur sur l’architecture tout en restant très opérationnel sur les sujets de développement, performance et industrialisation des traitements Data.

Requirements

Databricks, AWS, Spark / Scala, Architecture Solution Data, Data Engineering, Scrum Agile

Compétences / Qualités qui seraient un + :

Data Mesh, Power BI, FinOps, éco-conception numérique, industrialisation Data Platform, PoC et études d’architecture, accompagnement de squads Agile, Profil recherchéArchitecte Solution / Tech Lead Data disposant d’une forte expertise Databricks et Data Engineering sur Cloud AWS.Le profil doit être capable de prendre de la hauteur sur l’architecture tout en restant très opérationnel sur les sujets de développement, performance et industrialisation des traitements Data.Compétences et expérience requises- Minimum 10 ans d’expérience comme développeur et Data Engineer- Expérience de création et de monitoring de flux de données en Spark / Scala sur cloud public, idéalement AWS- Pratique intensive de Databricks pendant au moins 6 ans sur une plateforme en production- Minimum 2 années pleines de réalisation d’ingestions via des frameworks de développement spécifiques, hors outils natifs Databricks- Expérience d’intégration de données multi-sources et multi-formats : JSON, CSV, Parquet- Certification AWS- Minimum 3 ans d’expérience de provisioning de ressources AWS- Minimum 3 ans d’expérience en MCO de plateformes Data / Big Data en production- Expérience des outils de monitoring tels que Grafana, Kibana ou Datadog- Expérience significative en environnement Scrum AgileCompétences appréciées- Data Mesh- Power BI- FinOps- Éco-conception numérique- Cloud public AWS- Industrialisation Data Platform- PoC et études d’architecture- Accompagnement de squads Agile

Mais aussi…

Taux journalier :600€ / jour.css-11k7fwb{display:inline-block;white-space:nowrap;vertical-align:middle;-webkit-padding-start:var(–chakra-space-1-5);padding-inline-start:var(–chakra-space-1-5);-webkit-padding-end:var(–chakra-space-1-5);padding-inline-end:var(–chakra-space-1-5);text-transform:none;font-size:var(–chakra-fontSizes-xs);border-radius:var(–chakra-radii-md);font-weight:var(–chakra-fontWeights-semibold);background:var(–chakra-colors-success-200);color:var(–chakra-colors-success-700);box-shadow:var(–badge-shadow);padding:4px 6px;–badge-bg:var(–chakra-colors-success-100);–badge-color:colors.success.800;}.chakra-ui-dark .css-11k7fwb:not([data-theme]),[data-theme=dark] .css-11k7fwb:not([data-theme]),.css-11k7fwb[data-theme=dark]{–badge-bg:rgba(226, 243, 232, 0.16);–badge-color:var(–chakra-colors-success-200);}Cette offre est à 0% de commission .css-74lrwu{width:1em;height:1em;line-height:1em;-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;color:currentColor;font-size:16px;display:-webkit-box;display:-webkit-flex;display:-ms-flexbox;display:flex;-webkit-transition:.1s ease-in-out color;transition:.1s ease-in-out color;}.css-74lrwu *{-webkit-transition:.1s ease-in-out fill;transition:.1s ease-in-out fill;fill:var(–chakra-colors-rythm-600);}, Minimum 10 ans d’expérience comme développeur et Data Engineer

  • Expérience de création et de monitoring de flux de données en Spark / Scala sur cloud public, idéalement AWS
  • Pratique intensive de Databricks pendant au moins 6 ans sur une plateforme en production
  • Minimum 2 années pleines de réalisation d’ingestions via des frameworks de développement spécifiques, hors outils natifs Databricks
  • Expérience d’intégration de données multi-sources et multi-formats : JSON, CSV, Parquet
  • Certification AWS
  • Minimum 3 ans d’expérience de provisioning de ressources AWS
  • Minimum 3 ans d’expérience en MCO de plateformes Data / Big Data en production
  • Expérience des outils de monitoring tels que Grafana, Kibana ou Datadog
  • Expérience significative en environnement Scrum Agile

Compétences appréciées

  • Data Mesh
  • Power BI
  • FinOps
  • Éco-conception numérique
  • Cloud public AWS
  • Industrialisation Data Platform
  • PoC et études d’architecture
  • Accompagnement de squads Agile

EUR

Scala AWS Kibana Power BI Grafana Scrum Eco-conception JSON

Benefits & conditions

Oui - 2 jours/semaine

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.hellowork.com

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

1:59 min

Configuring the browser speech recognition class and grammar

Tobias Münch Tobias Münch · WWC 2024

3:21 min

Deploying a primary Elasticsearch and Kibana cluster configuration

Philipp Krenn · WWC 2022

3:47 min

Exploring JSON, CBOR, and JOSE for data serialization

Aaron Russell · LIVE

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

2:49 min

Evaluating cross-browser support and persistent platform limitations

Nico Martin · LIVE

4:51 min

Executing simple full-text search queries using the Kibana interface

Derek Binkley · LIVE

Videos

See all

Related articles

See all