Data Engineer (Cloud Migration & Big Data)

CAS
Municipality of Madrid, Spain
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
Spanish, English
Compensation
€ 39K

Job location

Municipality of Madrid, Spain

Tech stack

Artificial Intelligence
Airflow
Amazon Web Services (AWS)
Big Data
Cloud Computing
Databases
Continuous Integration
DevOps
Elasticsearch
Hadoop
Hadoop Distributed File System
NoSQL
Apache Oozie
Systems Development Life Cycle
Scala
Shell Script
SQL Databases
Data Streaming
Parquet
Spark
Gitlab
Kubernetes
Kafka
Kibana
Jenkins

Job description

Estamos buscando Data Engineers con una sólida base técnica y mentalidad ágil para integrarse en un proyecto de gran escala en el sector bancario. Participarás en la transformación de infraestructuras Hadoop hacia entornos punteros en la nube., * Migración estratégica: Trasladar infraestructura Hadoop a Kubernetes Engine, COS, Spark y Airflow as a Service.

  • Ingeniería de datos: Implementar transformaciones complejas y asegurar la calidad del dato usando Scala, SQL y Spark.
  • Automatización & DevOps: Configurar pipelines CI/CD y orquestación avanzada con Airflow.
  • Innovación Gen AI: Diseño de prompts efectivos para optimizar el ciclo de vida del desarrollo (SDLC).

Requirements

Buscamos profesionales con visión de negocio (preferiblemente experiencia en el sector bancario), capacidad analítica y orientados a resultados. Si te apasiona la mejora continua y el trabajo en equipos multifuncionales, este es tu sitio., * Core: Spark (Scala), Hadoop, HDFS, Apache Airflow.

  • Cloud & Infra: Kubernetes, S3/COS, formatos Parquet/ORC.
  • Bases de Datos: Sólidos conocimientos en SQL y NoSQL.
  • Herramientas: CI/CD (GitLab, Jenkins), Shell Scripting, Oozie.
  • Plus valorable: Dremio, Elasticsearch, Kibana, Kafka (Streaming) y HVault., Big Data DevOps Técnico de Sistemas

Idiomas: Inglés (Alto)

Formación Mínima: Licenciado

Nivel Profesional: Especialista

Benefits & conditions

  • Modalidad: Híbrido (Madrid) 1/4 (presencial/ remoto).

  • Requisito clave: Inglés B2 real (fluidez para entornos internacionales).

  • Extra: Disponibilidad para viajes ocasionales a Italia ., * Jornada completa Jornada

  • 3-5 años Experiencia

  • Indefinido Tipo contrato

  • 36.000 € - 39.000 € Bruto/año Salario

  • Spark hadoop apache airflow

Apply for this position