Azure Databricks Data Engineer

Bluetab
Legutio, Spain
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
Spanish
Experience level
Senior
Compensation
€ 60K

Job location

Legutio, Spain

Tech stack

Amazon Web Services (AWS)
Azure
Big Data
Cloud Computing
Cloud Engineering
Data Warehousing
Integrated Development Environments
Python
Scala
Spark
Data Lake
PySpark
Databricks

Job description

Bluetab, an IBM busca un Data Engineer apasionado/a por Cloud y Big Data para desarrollar y optimizar pipelines de datos. Con al menos 4-5 años de experiencia, el candidato debe dominar Scala, Python o PySpark, y ser capaz de diseñar arquitecturas Data Lake y Data Warehouse en entornos Cloud, principalmente Azure., Si te encanta enfrentar desafíos complejos y optimizar el rendimiento y calidad de los procesos, esta es tu oportunidad para unirte a un equipo innovador., * Desarrollar y optimizar pipelines de datos en Scala, Python o PySpark.

  • Diseñar y construir arquitecturas Data Lake y Data Warehouse en entornos Cloud.
  • Transformar datos a gran escala mediante Spark., Bluetab, an IBM Company. certificados Great Place to Work & Best Work to Place como una de las mejores compañías para trabajar.

Una compañía muy techie que nos ha llevado a ser el brazo fuerte de IBM en Data, Cloud, ML & IA y donde, para empresas clave de diversos sectores, ayudamos a acelerar y optimizar estrategias en plataformas de datos y en la nube, sacando al máximo las ventajas de su arquitectura y entornos de desarrollo.

Dentro de nuestra línea estratégica de Cloud Native estamos buscando apasionados/as del Cloud Azure (somos Databricks & Gold Microsoft Partner) para participar en proyectos a nivel nacional e internacional donde podrás ponerte a prueba al máximo., * Desarrollar y optimizar pipelines de datos en Scala, Python o PySpark desarrollando y ejecutando procesos en Spark, o sobre Databricks, garantizando rendimiento, calidad y escalabilidad.

  • Diseñar y construir arquitecturas Data Lake y Data Warehouse en entornos Cloud (Azure mayormente o sino en entornos AWS o GCP).
  • Transformar datos a gran escala mediante Spark, aplicando buenas prácticas de procesamiento distribuido.
  • Optimizar queries y almacenamiento en Databricks, asegurando eficiencia en el consumo de datos y reducción de costos.
  • Integrar múltiples fuentes de datos, asegurando su calidad, consistencia y trazabilidad.
  • Colaborar con equipos multidisciplinares, impulsando la mejora continua en procesos de ingesta y transformación.

Requirements

  • Al menos 4-5 años de experiencia como Data Engineer.
  • Dominio de Scala, Python o PySpark en entornos Cloud.
  • Experiencia en desarrollo y optimización de pipelines de datos a gran escala., En Bluetab, an IBM Company, llevamos la ingeniería de datos al siguiente nivel. Buscamos un Data Engineer con al menos 4-5 años de experiencia consolidada, que domine Scala, Python o PySpark, desarollando y ejecutando procesos Spark, o sobre Databricks en entornos Cloud. Si te apasiona el mundo del Big Data, disfrutas enfrentándote a retos complejos y te encanta optimizar pipelines de datos a gran escala, esta es tu ocasión para unirte a un equipo donde la innovación, la escalabilidad y la eficiencia son nuestra hoja de ruta.

Apply for this position