Data Engineer/ Arquitecto Técnico Databricks

Voiping US
Sarria, Spain
26 days ago
Apply on www.buscojobs.com.es
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience required
3 years minimum
Working hours
Regular working hours

Tech stack

Artificial Intelligence Data Analysis Extract Transform Load (ETL) Apache Spark Data Lakes Pyspark Databricks

Job description

Buscamos Data Engineer / Arquitecto Técnico Databricks¿Te apasiona la ingeniería del dato, las arquitecturas Lakehouse y los entornos cloud de última generación?Estamos incorporando un/a Data Engineer Senior / Arquitecto Técnico Databricks para participar en un proyecto estratégico de transformación y analítica avanzada, trabajando con tecnologías punteras dentro del ecosistema Databricks y Azure.¿Qué harás?Diseñar y desarrollar pipelines de datos batch y streaming sobre Databricks.Construir arquitecturas Lakehouse basadas en Delta Lake.Implementar procesos de ingesta, transformación y explotación de datos con PySpark y SQL.Diseñar modelos de datos bajo arquitectura Medallion (Bronze, Silver y Gold).Optimizar rendimiento de plataformas y cargas de trabajo distribuidas.Participar en la definición de estándares de desarrollo, despliegue y gobierno del dato.Colaborar con equipos de Data, Analytics, AI y Negocio en proyectos de alto impacto.Tecnologías principalesDatabricksApache SparkPySparkDelta LakeDatabricks SQLAzure Data Lake StorageAzure Data FactoryMicrosoft FabricAzure DevOpsAWSBuscamos profesionales conMás de 3 años de experiencia en Ingeniería del Dato.Experiencia sólida con Databricks en entornos productivos.Conocimientos avanzados de Spark, PySpark y SQL.Experiencia en diseño de arquitecturas Lakehouse.Optimización de entornos Databricks y Delta Lake.Muy valorableKafka y plataformas de streaming.dbt.Airflow.Terraform. xbhjioe Migraciones de ETL tradicionales a Databricks.ImprescindibleCertificación Databricks Certified Data Engineer Professional

Requirements

SparkPySparkDelta LakeDatabricks SQLAzure Data Lake StorageAzure Data FactoryMicrosoft FabricAzure DevOpsAWSBuscamos profesionales conMás de 3 años de experiencia en Ingeniería del Dato.Experiencia sólida con Databricks en entornos productivos.Conocimientos avanzados de Spark, PySpark y SQL.Experiencia en diseño de arquitecturas Lakehouse.Optimización de entornos Databricks y Delta Lake.Muy valorableKafka y plataformas de streaming.dbt.Airflow.Terraform. xbhjioe Migraciones de ETL tradicionales a Databricks.ImprescindibleCertificación Databricks Certified Data Engineer Professional

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.buscojobs.com.es
Prepare application

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

2:05 min

Enhancing Databricks tooling for software engineering workflows

Alan Mazankiewicz · LIVE

5:14 min

Executing Databricks jobs with built-in Airflow operators

Alan Mazankiewicz · LIVE

3:24 min

The governance failures of centralized data lakes

Mario Meir-Huber · LIVE

4:32 min

Harnessing Spark with Python using PySpark and Py4J

Ayon Roy · LIVE

2:38 min

Overview of Databricks and interactive data processing

Alan Mazankiewicz · LIVE

8:27 min

Building generic custom operators for Databricks APIs

Alan Mazankiewicz · LIVE

Videos

See all

Related articles

See all