Ingeniero/a datos

COGNODATA

Municipality of Madrid, Spain

6 days ago

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Working hours

Regular working hours

Languages

Spanish

Experience level

Senior

Job location

Remote

Municipality of Madrid, Spain

Tech stack

Azure

Continuous Integration

DevOps

Github

Hive

DataOps

SQL Databases

Infrastructure as Code (IaC)

GIT

Data Lake

Bicep

Terraform

Databricks

Job description

¿Quieres formar parte de una empresa líder en Customer Science y Marketing Automation? En Cognodata, ayudamos a nuestr@s client@s a mejorar su posición competitiva mediante la gestión avanzada de la información. ¡Únete a nuestro equipo!, Buscamos un/a Ingeniero/a de Datos para trabajar en proyectos de banca. La persona ideal tendrá un fuerte enfoque en arquitecturas base/master, procesamiento distribuido y gobierno del dato., * Diseñar, construir y mantener pipelines de datos robustos y escalables.

Implementar arquitecturas de datos distribuidas orientadas a calidad, rendimiento y seguridad.
Desarrollar procesos batch avanzados utilizando Azure Databricks y Apache Spark 3 (Scala y Python).
Optimizar cargas analíticas mediante Delta Lake, incluyendo estrategias de particionado, OPTIMIZE y Z-Order.
Modelar, transformar y explotar datos usando SQL/HQL, motores SQL y Hive.
Gestionar y optimizar clústeres en Databricks: autoscaling, políticas de clúster y control de costes.
Diseñar y automatizar flujos mediante Notebooks, Workflows y orquestadores nativos.
Participar en iniciativas de DevOps/DataOps implementando CI/CD e Infraestructura como Código (IaC).
Desplegar infraestructura en Azure mediante Bicep/ARM y, cuando aplique, Terraform.
Colaborar en equipos multidisciplinares con alto nivel técnico y orientación a calidad.

Requirements

Pensamiento analítico y estratégico
️ Comunicación efectiva y storytelling con datos
Proactividad y orientación a resultados
Capacidad de adaptación a entornos ágiles, * 5 años de experiencia como Data Engineer.
Experiencia sólida en Azure, Databricks y Spark (Scala/Python).
Dominio de SQL/HQL y ecosistema Hive.
Experiencia real con Delta Lake y optimización de performance.
Conocimientos avanzados de gestión de clústeres en Databricks.
Experiencia con CI/CD, Git (branching strategies) y pipelines en Azure DevOps o GitHub Actions.
Conocimientos de IaC (Bicep/ARM/Terraform).
Mentalidad orientada a calidad, escalabilidad y buenas prácticas.
Muy valorable
Experiencia en entornos productivos de alta exigencia técnica.
Capacidad para trabajar en equipo y aportar soluciones escalables y mantenibles.
Actitud proactiva, orientación al detalle y pasión por el dato.