Data Engineer (H/F)

CHARLI GROUP
Canton of Issy-les-Moulineaux, France
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
French, English
Experience level
Senior
Compensation
€ 55K

Job location

Canton of Issy-les-Moulineaux, France

Tech stack

Agile Methodologies
Airflow
Amazon Web Services (AWS)
Amazon Web Services (AWS)
JIRA
Big Data
Cloud Computing
Continuous Integration
Data Governance
Data Warehousing
Amazon DynamoDB
Python
Scrum
Scala
SQL Databases
Data Streaming
Informatica Powercenter
Spark
Gitlab-ci
Data Management
Data Delivery
Terraform
Jenkins

Job description

Les projets en cours sont variés et incluent :

  • L'optimisation des algorithmes de recommandation et segmentation ;

  • Le développement d'un Feature Store pour la gestion des données ;

  • La modernisation des flux financiers et des plateformes de contenu ;

  • La mise en place d'architectures Big Data traitant plus de 100 To de données par jour ;

  • Le partage d'informations clients avec des partenaires stratégiques., Intégré(e) à l'équipe DATA Delivery, vous interviendrez sur l'évolution et la maintenance des socles de données (Usage, VOD, Advertising, CRM...) et leur interconnexion avec divers partenaires. Vous travaillerez sur des architectures de Streaming Data full AWS et des technologies Big Data avancées. Vos responsabilités incluront notamment :

  • La conception et le développement de pipelines de données performants ;

  • Administrer, maintenir et optimiser la plateforme Informatica PowerCenter ( serveurs, repository, workflow, sessions…)

  • Concevoir, développer et documenter des workflows data pour alimenter le data warehouse et SI applicatifs

  • Concevoir, développer et documenter des workflows Lakehouse avec AWS, Airflow, DBT et Python

  • L'implémentation d'architectures de Streaming Data scalables et robustes ;

  • Le développement de traitements de données en temps réel avec Scala, Spark et Terraform ;

  • L'optimisation et la modernisation des flux de données dans un environnement Big Data ;

  • Former et assister les utilisateurs internes ( équipes data, développeurs, MOA …)

  • La mise en œuvre de bonnes pratiques en termes de qualité et de gouvernance des données ;

  • La collaboration avec les équipes Data, BI et Infra pour garantir la cohérence et la disponibilité des données.

Requirements

Environnement technique

  • Cloud & Big Data : AWS (Lambda, EMR Serverless, Kinesis Stream, S3, Firehose, DynamoDB)
  • Développement : Informatica, Scala, Spark, SQL, Terraform, Python
  • CI/CD & Orchestration : GitLab CI/CD, Jenkins
  • Méthodologies : Agile (Scrum, Kanban), Vous justifiez d'une expérience de 5 ans minimum dans un environnement similaire
  • Vous maîtrisez Informatica, AWS, Terraform, vous êtes fluent en Scala et Spark avancé et aimez les challenges

  • Vous etes experts dans le développement de solution d'intégration Big Data.

  • Vous parlez Anglais couramment -Vous connaissez et maîtrisez les outils JIRA et les méthodes « agiles » n'ont pas de secret pour vous !

  • Autonome, ouvert d'esprit et bon communiquant, vous disposez d'une grande curiosité scientifique

About the company

Dans le cadre d'un programme de transformation DATA, l'objectif est de doter l'entreprise d'outils permettant une exploitation avancée des données pour des prises de décisions optimisées. Ce programme impacte à la fois les technologies utilisées, l'organisation et les processus internes., Créé en Janvier 2020, Charli Group est une société de service spécialisée dans les métiers de l'IT. Afin d'accompagner au mieux nos collaborateurs et nos clients, nous avons créé 4 filiales PURE PLAYER dans leur domaine: - Charli Network & Security - Charli Systems & Cloud - Charli CyberSécurity -Charli Data & Digital La gestion de carrière de nos collaborateurs est un élément central chez Charli. Pour cela, nous vous accompagnons à travers: - Les formations et le passage de certifications chaque année - Des missions d'envergure via des clients du CAC40 / SBF 120 - Un suivi présent et personnalisé par votre ingénieur d'affaires et le recruteur - Des Tech MeetUp initié par nos plus grands experts et ouverts à tous Envie de nouveaux challenges, alors rejoignez nous :

Apply for this position