Data Engineer

Capitole
Barcelona, Spain
6 days ago
Apply on www.buscojobs.com.es
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience required
4 years minimum
Working hours
Regular working hours
Languages
English

Tech stack

Application Programming Interfaces (APIs) Microsoft Azure Extract Transform Load (ETL) Data Transformation Python (Programming Language) SQL Databases Azure Data Factory Apache Spark Data Lakes Pyspark Databricks

Job description

¿Eres un experto en la capa de extracción y transformación de datos?Buscamos un Data Engineer para unirse a nuestro equipo en Barcelona en un modelo híbrido.Te centrarás en el desarrollo y mantenimiento de pipelines ETL/ELT robustos dentro de un entorno Lakehouse.Trabajarás con tecnologías de vanguardia como Databricks (Unity Catalog) y Spark Declarative Pipelines, formando parte de la creación de una plataforma de datos desde cero.Responsabilidades del puesto?Desarrollar, desplegar y mantener pipelines de datos (ETL/ELT) utilizando Databricks y Azure Data Factory.?Implementar y optimizar flujos de trabajo con Unity Catalog y Delta Lake Tables.?Garantizar la calidad del dato mediante validaciones, monitorización y resolución de incidencias en producción.?Colaborar estrechamente con arquitectos y analistas para asegurar la integridad de los modelos de datos y el cumplimiento del roadmap.Must Have?Experiencia mínima de 4 años como Data Engineer con foco en entornos cloud (Azure).?Experiencia real y demostrable con Databricks (Unity Catalog, Autologger, Spark, Delta Lake).?Sólidos conocimientos en Python (PySpark), SQL avanzado.?Nivel de Inglés AltoRequisitos deseables?Conocimientos en tecnologías de streaming de datos y APIs de terceros.?Familiaridad con Infrastructure as Code (IaC) y Gobernanza de Datos.?Experiencia con Scala o conocimientos de Microsoft Azure Fabric.¿Por qué unirte a nosotros??**€ al año en formación?Seguro médico privado gratuito?Retribución flexible en transporte, guardería y tickets restaurante?Acceso a +10K gimnasios por toda España en Wellhub (Gymforless)?Eventos, team buildings y afterworks cada dos mesesPatrocinamos nuestro equipo de fútbol si te animas a jugar?Comunidades tecnológicas inTernas para compartir y crecer juntos?Sabemos lo importante que es informarte de la empresa, cultura y opiniones de otros profesionales del sector.Por esto, te invitamos a investigar sobre nosotros en Glassdoor.¿Te animas a este gran reto y equipo??Empowering People, Unlocking InnovationEl empleado se adherirá a las políticas de seguridad de la información:· Tenedrá acceso a información confidencial relacionada con Capitole y el proyecto en el que está trabajando.· Deberá cumplir con las políticas de seguridad y las pautas internas de la empresa y del cliente.· Se le requerirá firmar un NDA.#J-**-Ljbffr

Requirements

Experiencia mínima de 4 años como Data Engineer con foco en entornos cloud (Azure). ? Experiencia real y demostrable con Databricks (Unity Catalog, Autologger, Spark, Delta Lake). ? Sólidos conocimientos en Python (PySpark), SQL avanzado. ? Nivel de Inglés Alto Requisitos deseables ? Conocimientos en tecnologías de streaming de datos y APIs de terceros. ? Familiaridad con Infrastructure as Code (IaC) y Gobernanza de Datos. ? Experiencia con Scala o conocimientos de Microsoft Azure Fabric.

Benefits & conditions

*****€ al año en formación ? Seguro médico privado gratuito ? Retribución flexible en transporte, guardería y tickets restaurante ? Acceso a +10K gimnasios por toda España en Wellhub (Gymforless) ? Eventos, team buildings y afterworks cada dos meses Patrocinamos nuestro equipo de fútbol si te animas a jugar ? Comunidades tecnológicas inTernas para compartir y crecer juntos ? Sabemos lo importante que es informarte de la empresa, cultura y opiniones de otros profesionales del sector. Por esto, te invitamos a investigar sobre nosotros en Glassdoor.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.buscojobs.com.es
Prepare application

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

4:32 min

Harnessing Spark with Python using PySpark and Py4J

Ayon Roy · LIVE

5:14 min

Executing Databricks jobs with built-in Airflow operators

Alan Mazankiewicz · LIVE

3:24 min

The governance failures of centralized data lakes

Mario Meir-Huber · LIVE

2:05 min

Enhancing Databricks tooling for software engineering workflows

Alan Mazankiewicz · LIVE

2:38 min

Overview of Databricks and interactive data processing

Alan Mazankiewicz · LIVE

Videos

See all

Related articles

See all