Data Engineer

Sant Joan de Labritja, Spain

2 days ago

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Working hours

Regular working hours

Languages

Spanish

Experience level

Intermediate

Compensation

€ 60K

Job location

Sant Joan de Labritja, Spain

Tech stack

Agile Methodologies

Airflow

Big Data

Databases

Hadoop

Python

NoSQL

Scala

SQL Databases

Spark

Job description

Una empresa de ingeniería busca un/a Data Engineer para unirse a un proyecto clave en el sector bancario. El candidato ideal tendrá al menos 3-4 años de experiencia en ecosistemas Big Data, un sólido conocimiento de Spark, Scala y Python, así como experiencia en la automatización de procesos a través de Airflow. El rol incluye la migración de infraestructuras a arquitecturas cloud, la optimización de pipelines de datos y el trabajo en un entorno ágil. Además, se ofrece un paquete de beneficios competitivo y un plan de carrera personalizado., * Participar en la migración de infraestructuras Hadoop legacy hacia arquitecturas cloud.

Desarrollar y optimizar pipelines de datos robustos y escalables.
Implementar procesos de transformación y calidad de datos utilizando Spark y SQL.
Automatizar pipelines mediante Airflow.
Realizar tests unitarios y validaciones de calidad de datos.

Requirements

Experiencia como Data Engineer (mínimo 3-4 años) trabajando con ecosistemas Big Data.
Conocimiento sólido de SQL y bases de datos NoSQL.
Experiencia trabajando en entornos Agile.