Azure Data Engineer

Airplane Solutions
Spain
16 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience required
4 years minimum
Working hours
Regular working hours

Tech stack

.NET Framework Microsoft Azure C Sharp (Programming Language) Continuous Integration Data Warehousing Apache Hive Python (Programming Language) SQL Azure Power BI Kusto Query Language DataOps Azure Data Lake
+15 more
SQL Databases Data Streaming Azure Service Bus Azure Data Factory Apache Spark Data Lakes Pyspark Bicep Machine Learning Operations Terraform Azure Synapse Analytics Stream Analytics Serverless Computing Azure Resource Manager Databricks

Job description

Somos una empresa tecnológica con producto propio, especializada en el desarrollo de soluciones de software para entornos críticos del sector aeronáutico. Creamos tecnología robusta, escalable y alineada con las necesidades reales del negocio, trabajando sobre ecosistemas Microsoft para garantizar fiabilidad, integración y capacidad de evolución., 1. Diseño y orquestación de pipelines de datos

  • Creación, despliegue y monitorización de pipelines en Azure Data Factory y/o Azure Databricks.
  • Estrategias de ingestión batch y streaming (Event Hubs, Azure Stream Analytics).
  1. Procesamiento y almacenamiento
  • Modelado y optimización en Azure Synapse Analytics y Azure SQL Data Warehouse.
  • Gestión de grandes volúmenes en Azure Data Lake Storage Gen2 con partición y compresión.
  • Políticas de seguridad y cifrado (en reposo y en tránsito).
  • Diseño de tablas ADX: ingestión por pipelines, SDKs, Event Grid.
  • KQL avanzado: consultas exploratorias, agregaciones, series temporales.
  • Funciones y políticas: parse_json, mv-expand, estimated_statistics, update policies.
  • Integración: Power BI DirectQuery y dashboards nativos ADX.
  • Monitorización: ajuste de clústeres, escalado y análisis de costes con Azure Monitor.
  • Lakehouse & Warehouse: unificación de Data Lake y Synapse en un entorno integrado.
  • Pipelines en Fabric: orquestación con Data Factory en Fabric, notebooks de Spark en Spark Compute.
  • Data Engineering en Fabric: Spark SQL, PySpark y C# en Notebooks; optimización con Delta tables nativas.
  • Governance & Security: Control con Purview integrado, políticas de acceso unificadas y encriptación automática.
  • Fabric Workloads: integración de Data Science (ML), Power BI en Fabric, Data Activator para eventos en tiempo real.

Requirements

  • Grado en Ingeniería Informática, Telecomunicaciones, Estadística o similar.
  • +6 años de experiencia realizando funciones similares a las descritas., * Transformaciones avanzadas con Apache Spark (PySpark/Scala) en Databricks o Fabric Spark Compute.
  • Azure Functions y .NET para microservicios data-driven.
  • IaC con Terraform, Bicep o ARM Templates.
  1. Business Intelligence y visualización
  • Dashboards en Power BI sobre Fabric or Synapse, DAX avanzado, DirectQuery/Composite Models.
  • DataOps y MLOps: CI/CD para pipelines, despliegues automáticos con Azure DevOps., * +4 años en Data Engineering sobre Azure y Fabric.
  • DP-203 skills: almacenamiento, procesamiento y continuidad operativa.
  • SQL avanzado, Python (pandas, PySpark) y/o Scala.
  • AKS y contenedores.

Benefits & conditions

Proyecto estable con contrato indefinido.

Salario acorde a la experiencia y los conocimientos que aportas.

Modalidad de trabajo híbrida, nos adaptamos a tus necesidades y a las del proyecto.

Flexibilidad horaria, solo tienes que coordinarte con tu equipo.

Viernes y agosto jornada intensiva.

23 días de vacaciones + 2 flexidays.

Día de cumpleaños libre para que lo disfrutes como quieras.

Certificaciones oficiales de Microsoft, apostamos por tu formación y crecimiento.

Eventos y Teambuildings para desconectar y compartir momentos con el equipo.

Un ambiente de trabajo basado en la confianza y la corresponsabilidad de todo el equipo., * Seguro médico y dental para que te centres en lo importante: tu bienestar.

  • Ticket restaurante a cargo de la empresa.
  • Ayuda para la formación en inglés o bienestar físico.
  • Retribución flexible: puedes repartir parte de tu salario en productos o servicios con exención fiscal.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.jobleads.com

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

2:00 min

Separating dataset creation from low-level software implementation steps

Jan Zawadzki · WWC 2022

4:32 min

Harnessing Spark with Python using PySpark and Py4J

Ayon Roy · LIVE

2:56 min

Provisioning a secure container infrastructure with Bicep

Matthias Falkenberg +1 · WWC 2022

3:03 min

Career evolution in data engineering and AI platforms

Maria Apazoglou · Coffee With Developers

3:37 min

Scaling machine learning pipelines from prototypes to petabytes

Julian Joseph · LIVE

1:43 min

AWS infrastructure stack and data flow pipeline overview

Artem Volk Artem Volk +1 · WWC 2024

Videos

See all

Related articles

See all