Azure Databricks Data Engineer

Bluetab
Municipality of Marbella, Spain
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
Spanish, English
Compensation
€ 55K

Job location

Remote
Municipality of Marbella, Spain

Tech stack

Airflow
Amazon Web Services (AWS)
Apache HTTP Server
Azure
Cloud Computing
Cloud Engineering
Information Engineering
Data Warehousing
Integrated Development Environments
Python
Scala
SQL Databases
Google Cloud Platform
Spark
Data Lake
PySpark
Apache Flink
Data Lakehouse
Terraform
Databricks

Job description

Bluetab, una compañía de IBM, busca un ingeniero de datos para desarrollar y optimizar pipelines en entornos Cloud, principalmente Azure. El candidato ideal tendrá experiencia en Scala y Python, así como en herramientas como Databricks., * Desarrollar y optimizar pipelines de datos en Scala, Python o PySpark.

  • Diseñar y construir arquitecturas Data Lake y Data Warehouse en entornos Cloud.

  • Transformar datos a gran escala mediante Spark., Una compañía muy tecnológica que ha impulsado la presencia de IBM en Data, Cloud, ML e IA y, para clientes de diferentes sectores, ayuda a acelerar y optimizar estrategias en plataformas de datos y en la nube, sacando al máximo las ventajas de su arquitectura y entornos de desarrollo., Dentro de nuestra línea estratégica de Cloud Native buscamos apasionados/as del Cloud Azure (somos Databricks & Gold Microsoft Partner) para participar en proyectos a nivel nacional e internacional donde podrás poner a prueba tus competencias al máximo. Responsabilidades

  • Desarrollar y optimizar pipelines de datos en Scala, Python o PySpark, ejecutando procesos en Spark o sobre Databricks, garantizando rendimiento, calidad y escalabilidad.

  • Diseñar y construir arquitecturas Data Lake y Data Warehouse en entornos Cloud, principalmente Azure, o AWS o GCP.

  • Transformar datos a gran escala mediante Spark, aplicando buenas prácticas de procesamiento distribuido.

  • Optimizar queries y almacenamiento en Databricks, asegurando eficiencia en el consumo de datos y reducción de costos.

  • Integrar múltiples fuentes de datos, garantizando su calidad, consistencia y trazabilidad.

  • Colaborar con equipos multidisciplinares, impulsando la mejora continua en procesos de ingesta, transformación y explotación de datos.

Requirements

  • Sólida experiencia en desarrollo con Scala o Python o PySpark sobre Spark para procesamiento distribuido.

  • Experiencia con Databricks y conocimientos en arquitecturas Data Lakehouse.

  • Conocimiento avanzado de SQL y optimización de queries., Desarrollo con Scala Desarrollo con Python Databricks SQL, * Sólida experiencia en desarrollo con Scala o Python o PySpark sobre Spark para procesamiento distribuido.

  • Experiencia con Databricks y conocimientos en arquitecturas Data Lakehouse.

  • Conocimiento avanzado de SQL, optimización de queries y modelos de datos escalables.

  • Experiencia en despliegues y automatización con herramientas como Terraform, Airflow o similares.

  • Familiaridad con entornos Cloud.

  • Mentalidad analítica y enfoque en la eficiencia, optimización y escalabilidad de procesos de datos.

  • Actitud colaborativa y pasión por la innovación, trabajando en equipo para resolver desafíos complejos.

Valorable

  • Experiencia en Apache Iceberg o Apache Flink.
  • Inglés nivel B2.

Benefits & conditions

Contrato indefinido Teletrabajo flexible Horas flexibles 23 días de vacaciones Seguro médico Planes de retribución flexible, Ofrecemos un contrato indefinido, teletrabajo flexible y beneficios como días de vacaciones, seguro médico y un programa de desarrollo profesional continuo., * Contrato indefinido y salario competitivo acorde al mercado y al rol.

  • Teletrabajo flexible y disponibilidad de despachos en Madrid y los hubs de Alicante, Barcelona, Bilbao y Málaga.
  • Horarios flexibles de entrada/salida y jornada intensiva los viernes y durante los meses de verano (julio y agosto).
  • 23 días de vacaciones.
  • Tarjeta restaurant y seguro médico con amplia cobertura dental.
  • Planes de retribución flexible: transporte, guardería y plan de formación continua gamificada.
  • Programa Career Coach para acompañar tu desarrollo y crecimiento dentro de Bluetab.
  • Tarjeta Regalo Pass de 50 € en el mes de tu cumpleaños.

Apply for this position