Project/Data Analyst
- Discuss this with your agent
- Open in Claude
- Open in ChatGPT
Prepare application
- Draft this with your agent
- Open in Claude
- Open in ChatGPT
Role details
Tech stack
+3 more
Job description
Data Engineer Big Data - Spark, Azure & BigQuery ? En Shakers colaboramos con una aseguradora lÃder en España, muy enfocada en innovación y transformación digital, para incorporar un/a Data Engineer especializado/a en Big Data a su equipo de Data Engineering.Proyecto de largo recorrido, con presencia hÃbrida en Madrid.El reto El equipo de Data Engineering gestiona proyectos de Big Data de principio a fin, desde la toma de requisitos hasta la puesta en producción.Necesitan a alguien que diseñe soluciones, lidere la integración de datos batch y en tiempo real, y que se mueva con soltura entre Spark, Java y Python.El dÃa a dÃa combina diseño técnico, documentación, supervisión de desarrollos externos y una búsqueda constante de eficiencia en los procesos de datos, con margen para proponer mejoras y explorar prácticas de DevOps/DataOps.Responsabilidades Llevar proyectos de Big Data de extremo a extremo, desde el levantamiento de requisitos hasta el despliegue en producción.Diseñar soluciones de datos y elaborar la documentación técnica y funcional correspondiente.Supervisar desarrollos externos y coordinar los ciclos de pruebas.Construir soluciones técnicas aplicando Spark, Java y Python.Integrar fuentes de datos mediante procesos batch y en tiempo real, liderando el proyecto de punta a punta.Optimizar procesos de datos existentes para mejorar el rendimiento de los sistemas.Proponer mejoras en las prácticas de Data Engineering y explorar enfoques DevOps/DataOps.Requisitos Más de 5 años de experiencia diseñando e implementando arquitecturas de Big Data.Experiencia sólida integrando y tratando datos en batch y en tiempo real con Spark.Conocimiento en ingenierÃa de procesos de IA: preparación de datasets e industrialización de código.Experiencia demostrable desarrollando software con Java y Python.Conocimientos avanzados de Azure (Power Apps, Data Factory, Databricks, FinOps).Experiencia con Google BigQuery: automatización de queries y gestión de accesos.Dominio avanzado de SQL.Titulación en IngenierÃa Superior y/o Técnica.Disponibilidad para modelo hÃbrido en Madrid (1 dÃa/semana presencial).Se valora Conocimiento del sector seguros.Experiencia con DevOps/DataOps, incluyendo integración y despliegue continuo.Familiaridad con herramientas de integración o analÃtica como OAS, Power BI, Informatica PowerCenter o Data Quality.Por qué este proyecto Proyecto a largo plazo, con estabilidad y continuidad.Pieza clave en la evolución de una plataforma de datos estratégica.Impacto directo en la arquitectura Big Data y en la estrategia de datos.Oportunidad de consolidarte como referente técnico en Azure y Google BigQuery.Si esto encaja con tu perfil o con el de alguien de tu entorno, aplica o comparte.Nos ponemos en contacto enseguida #BigData #Spark #Azure #GoogleBigQuery #DataEngineering #Freelance #Shakers
Requirements
Requisitos Más de 5 años de experiencia diseñando e implementando arquitecturas de Big Data. Experiencia sólida integrando y tratando datos en batch y en tiempo real con Spark. Conocimiento en ingenierÃa de procesos de IA: preparación de datasets e industrialización de código. Experiencia demostrable desarrollando software con Java y Python. Conocimientos avanzados de Azure (Power Apps, Data Factory, Databricks, FinOps). Experiencia con Google BigQuery: automatización de queries y gestión de accesos. Dominio avanzado de SQL. Titulación en IngenierÃa Superior y/o Técnica. Disponibilidad para modelo hÃbrido en Madrid (1 dÃa/semana presencial). Se valora Conocimiento del sector seguros. Experiencia con DevOps/DataOps, incluyendo integración y despliegue continuo. Familiaridad con herramientas de integración o analÃtica como OAS, Power BI, Informatica PowerCenter o Data Quality. Por qué este proyecto Proyecto a largo plazo, con estabilidad y continuidad. Pieza clave en la evolución de una plataforma de datos estratégica. Impacto directo en la arquitectura Big Data y en la estrategia de datos. Oportunidad de consolidarte como referente técnico en Azure y Google BigQuery.
Apply for this position
This job is hosted externally. Click below to view the full posting and apply.
Prepare application
- Draft this with your agent
- Open in Claude
- Open in ChatGPT
Good distractions
Talks and stories from around this role — technically off-topic, practically not.
Moments
Explore playlistsVideos
See allRelated articles
See all
Data Engineer Salary UK
Making Data Warehouses Fast: A Developer’s Story
Top-Paying Tech Jobs (with Salaries)
The Most Popular IT Jobs on the Market