Azure Databricks Data Engineer
Role details
Job location
Tech stack
Job description
Bluetab, una compañía de IBM, busca un ingeniero de datos para desarrollar y optimizar pipelines en entornos Cloud, principalmente Azure. El candidato ideal tendrá experiencia en Scala y Python, así como en herramientas como Databricks., * Desarrollar y optimizar pipelines de datos en Scala, Python o PySpark.
-
Diseñar y construir arquitecturas Data Lake y Data Warehouse en entornos Cloud.
-
Transformar datos a gran escala mediante Spark., Una compañía muy tecnológica que ha impulsado la presencia de IBM en Data, Cloud, ML e IA y, para clientes de diferentes sectores, ayuda a acelerar y optimizar estrategias en plataformas de datos y en la nube, sacando al máximo las ventajas de su arquitectura y entornos de desarrollo., Dentro de nuestra línea estratégica de Cloud Native buscamos apasionados/as del Cloud Azure (somos Databricks & Gold Microsoft Partner) para participar en proyectos a nivel nacional e internacional donde podrás poner a prueba tus competencias al máximo. Responsabilidades
-
Desarrollar y optimizar pipelines de datos en Scala, Python o PySpark, ejecutando procesos en Spark o sobre Databricks, garantizando rendimiento, calidad y escalabilidad.
-
Diseñar y construir arquitecturas Data Lake y Data Warehouse en entornos Cloud, principalmente Azure, o AWS o GCP.
-
Transformar datos a gran escala mediante Spark, aplicando buenas prácticas de procesamiento distribuido.
-
Optimizar queries y almacenamiento en Databricks, asegurando eficiencia en el consumo de datos y reducción de costos.
-
Integrar múltiples fuentes de datos, garantizando su calidad, consistencia y trazabilidad.
-
Colaborar con equipos multidisciplinares, impulsando la mejora continua en procesos de ingesta, transformación y explotación de datos.
Requirements
-
Sólida experiencia en desarrollo con Scala o Python o PySpark sobre Spark para procesamiento distribuido.
-
Experiencia con Databricks y conocimientos en arquitecturas Data Lakehouse.
-
Conocimiento avanzado de SQL y optimización de queries., Desarrollo con Scala Desarrollo con Python Databricks SQL, * Sólida experiencia en desarrollo con Scala o Python o PySpark sobre Spark para procesamiento distribuido.
-
Experiencia con Databricks y conocimientos en arquitecturas Data Lakehouse.
-
Conocimiento avanzado de SQL, optimización de queries y modelos de datos escalables.
-
Experiencia en despliegues y automatización con herramientas como Terraform, Airflow o similares.
-
Familiaridad con entornos Cloud.
-
Mentalidad analítica y enfoque en la eficiencia, optimización y escalabilidad de procesos de datos.
-
Actitud colaborativa y pasión por la innovación, trabajando en equipo para resolver desafíos complejos.
Valorable
- Experiencia en Apache Iceberg o Apache Flink.
- Inglés nivel B2.
Benefits & conditions
Contrato indefinido Teletrabajo flexible Horas flexibles 23 días de vacaciones Seguro médico Planes de retribución flexible, Ofrecemos un contrato indefinido, teletrabajo flexible y beneficios como días de vacaciones, seguro médico y un programa de desarrollo profesional continuo., * Contrato indefinido y salario competitivo acorde al mercado y al rol.
- Teletrabajo flexible y disponibilidad de despachos en Madrid y los hubs de Alicante, Barcelona, Bilbao y Málaga.
- Horarios flexibles de entrada/salida y jornada intensiva los viernes y durante los meses de verano (julio y agosto).
- 23 días de vacaciones.
- Tarjeta restaurant y seguro médico con amplia cobertura dental.
- Planes de retribución flexible: transporte, guardería y plan de formación continua gamificada.
- Programa Career Coach para acompañar tu desarrollo y crecimiento dentro de Bluetab.
- Tarjeta Regalo Pass de 50 € en el mes de tu cumpleaños.