DATA INGENIEUR
COMCYBER
Canton de Rennes-5, France
2 days ago
Role details
Contract type
Permanent contract Employment type
Full-time (> 32 hours) Working hours
Regular working hours Languages
French Experience level
IntermediateJob location
Canton de Rennes-5, France
Tech stack
Airflow
Big Data
Databases
Continuous Integration
Data Architecture
Relational Databases
DevOps
Distributed Systems
Elasticsearch
Hadoop Distributed File System
Python
PostgreSQL
NoSQL
TensorFlow
SQL Databases
PyTorch
Spark
Gitlab
Scikit Learn
Splunk
Docker
Job description
- Concevoir, développer et maintenir des pipelines de données robustes et évolutifs pour collecter, transformer et charger des données de formats multiples et provenant de diverses sources.
- Assurer la mise à disposition des données dans les bases de données (SQL/NoSQL) exploitées par les équipes métier (cyber threat intelligence, détection, réponse à incident) ;
- Participer à l'administration et à la maintenance applicative de l'architecture big data du Centre, à la résolution des problèmes techniques, et rechercher à optimiser ses performances ;
- Collaborer avec les data scientists pour comprendre leurs besoins de valorisation des données pour la recherche d'attaques cyber, et fournir des solutions techniques adaptées.
- Créer des rapports et des tableaux de bord pour visualiser les données et faciliter la prise de décision des analystes en cybersécurité.
- Fournir un appui technique aux utilisateurs finaux et aux autres équipes, sur le périmètre de la section.
- Assurer une veille technologique.
L'environnement technique : Airflow, ELK, Postgres, Splunk, Spark, Docker, TensorFlow, Scikit-learn, Pytorch, Python, Gitlab, etc.
Requirements
Issu d'une formation en informatique, vous avez acquis une expérience de 3 à 5 ans minimum dans le domaine du Data Engineering, de la Data Architecture ou du Big Data. Une expérience en cyber et/ou dans l'exploitation de données complexes est aussi appréciée.
Compétences mises en œuvre dans le cadre du poste :
- Maîtrise des langages courants de programmation et de données dans le domaine (Python, SQL, Spark, etc.).
- Connaissance des bases de données relationnelles (Postgres, etc.) et non relationnelles (Elasticsearch, etc.)
- Expérience avec des outils d'orchestration (Airflow, etc.)
- Expérience avec des outils de stockage et de calcul distribué (Spark, HDFS, etc.)
- Démarche DevOps (CI/CD, tests)
- Exploitation et rédaction de documentation technique et référentiels ;
- Capacité à travailler en équipe et à collaborer avec des analystes en cybersécurité ;
- Sens de l'organisation et rigueur.
About the company
L'affrontement dans le cyberespace est désormais une réalité. La menace cyber est permanente et en évolution continue. Le Commandement de la cyberdéfense (COMCYBER) est garant de la cohérence des actions militaires du domaine. A ce titre, le COMCYBER épaule l'ensemble du Ministère des Armées dans le recrutement de plus de 1 000 cybercombattants à horizon 2030 qui rejoindront des missions de renseignement, de protection, de défense et d'action dans le cyberespace.
La section DATA intégrée à la division appui aux opérations (DAO) du CALID est implantée à Rennes. Son rôle est de gérer, valoriser les données et chaînes de traitement pour améliorer les capacités opérationnelles des différentes divisions du CALID. Le Data Engineer a pour mission le traitement et la valorisation du Big Data sous toutes ses formes. Il réalise principalement des développements permettant de gérer les flux de données, de valoriser les données et de mettre en place des algorithmes qui répondent aux besoins spécifiques du centre. Le titulaire du poste intervient également dans l'industrialisation, la mise en production et l'optimisation de traitements sur les données en lien avec les équipes métier.