> Markdown version of [/jobs/ext/1963450-spark-data-engineer](https://www.wearedevelopers.com/jobs/ext/1963450-spark-data-engineer). Every page supports `.md` or `Accept: text/markdown`. Links point to the HTML versions so they work for humans too. Agent guide: [/agents.md](https://www.wearedevelopers.com/agents.md). --- # Spark Data Engineer - **Company:** SDG Group - **Location:** Santiago de Compostela, Spain (Remote available) - **Contract:** Permanent contract - **Skills:** Artificial Intelligence, Airflow, Amazon Web Services, Data Analysis, Apache HTTP Server, Microsoft Azure, Big Data, Cloud Computing, Computer Engineering, Continuous Integration, Extract Transform Load (ETL), DevOps, Python (Programming Language), DataOps, Scala (Programming Language), Parquet, Google Cloud, Snowflake, Apache Spark, Git, Data Lakes, Apache Flink, Apache Kafka, Machine Learning Operations, Data Lakehouse, Apache Beam, Databricks - **Published:** August 7, 2026 - **Apply:** https://www.buscojobs.com.es/spark-data-engineer-en-santiago-de-compostela-ID-365218555 ## About the Role Diseñamos arquitecturas que marcan estándares y creamos aceleradores que transforman. No solo se ejecutan proyectos, sino que se desarrollan aceleradores, artefactos y pruebas de concepto. ## Description Overview ¿Te gustaría llevar tu expertise en datos al siguiente nivel?En SDG Group somos líderes globales en Big Data, Business Intelligence, Analytics e Inteligencia Artificial.Desde **** hemos acompañado a la mitad del IBEX-35 y a algunas de las compañías más destacadas a nivel internacional en su transformación digital, convirtiendo los datos en soluciones de alto impacto gracias a nuestras alianzas estratégicas con Microsoft, Google y AWS, y a los mejores aceleradores tecnológicos del mercado.Nuestro equipo de Data Technologies es el epicentro donde aterrizan proyectos desafiantes y las soluciones más disruptivas.Trabajamos de forma transversal con clientes de múltiples sectores, siempre a la vanguardia tecnológica, combinando innovación, expertise y autonomía real .Diseñamos arquitecturas que marcan estándares y creamos aceleradores que transforman.No solo se ejecutan proyectos, sino que se desarrollan aceleradores, artefactos y pruebas de concepto.Aquí defines, experimentas y tienes ownership para diseñar soluciones desde cero .Responsabilidades Diseñarás y desarrollarás soluciones end-to-end para procesar grandes volúmenes de datos, desde el problema de negocio hasta pipelines ETL/ELT escalables y optimizados.Trabajarás con tecnologías como Apache Spark, Python, Scala, Apache Beam y orquestación con Airflow o Databricks Workflows, generando insights.Procesarás y almacenarás datos utilizando formatos como Parquet, Delta Lake y Apache Iceberg, garantizando eficiencia y escalabilidad en entornos cloud ( AWS, Azure, GCP ).Definirás arquitecturas avanzadas como Data Lakehouse, Data Mesh y data warehouses mejorando la gestión y el aprovechamiento de los datos.Colaborarás con equipos multidisciplinares y stakeholders, transformando requerimientos complejos en soluciones técnicas eficientes.Explorarás y evaluarás tecnologías emergentes, como Databricks, Delta Live Tables, dbt Cloud, Apache Iceberg, Snowflake... contribuyendo a mantener nuestros proyectos a la vanguardia del ecosistema Big Data.Impulsarás la calidad y observabilidad de los datos aplicando DataOps, Data Quality y CI/CD, asegurando pipelines confiables y seguros.Requisitos Formación en Ingeniería Informática, Telecomunicaciones, matemáticas, Física, o similares.Experiencia en Big Data : al menos 5 años trabajando con procesamiento distribuido y pipelines ETL/ELT en entornos complejos, utilizando lenguajes como Python o Scala y frameworks como Spark, Airflow o Databricks; conocimiento de arquitecturas de datos (Data Lakehouse, cloud) y formatos/almacenamiento como Parquet, Delta Lake, Iceberg o Snowflake.Buenas prácticas y gestión de código : Git, CI/CD, DataOps, monitorización de pipelines, control de calidad de datos y versionado de datos.Mentalidad de innovación : Curiosidad por tecnologías emergentes y tendencias Big Data, con disposición a experimentar y proponer mejoras continuas.Que puedas comunicarte en inglés para trabajar en entornos globales y colaborar con equipos internacionales.Valoramos también :Experiencia en proyectos de streaming en tiempo real, utilizando tecnologías como Kafka, Kinesis, Flink o Spark Structured Streaming.Conocimientos avanzados en orquestación, DevOps para datos, gobernanza, calidad y seguridad, así como experiencia con Data Mesh y arquitecturas distribuidas.Experiencia en ML pipelines y MLOps integrados con Big Data, usando herramientas como MLflow, SageMaker, Vertex AI o Kubeflow.Beneficios y Cultura Aquí no somos una empresa más... ¡somos un equipo que va a por todas!Tecnología e innovación sin límites.La tecnología y los datos son nuestra esencia.Trabajamos con lo más avanzado del mercado y te formamos para que domines las herramientas que están redefiniendo la industria.Tendrás acceso a las últimas plataformas y tecnologías: si algo es nuevo, lo estamos usando o evaluando.Desarrollo profesional a tu medida.Aquí no hay carreras rígidas ni caminos predefinidos: cada cierto tiempo se revisan tus logros y se definen nuevos objetivos.Podrás evolucionar hacia roles de arquitectura, tech lead, referente tecnológico o especialista en dominios complejos, manteniendo siempre un impacto directo en la tecnología y en las decisiones clave de los proyectos.Un equipo que te acompaña desde el primer día.Desde el minuto 1 formas parte del equipo de Data Technologies, formado por numerosos referentes donde la colaboración es el pilar fundamental.Propósito y valores que nos definen.Creemos firmemente en la diversidad y la inclusión como motores esenciales de la creatividad y la innovación.Es lo que nos permite superar cualquier desafío y construir un entorno donde cada perspectiva enriquece el resultado final.Contrato indefinido (¡queremos que te quedes mucho tiempo!)Flexibilidad total.Remoto 100%, híbrido u oficina.Tú decides dónde y cómo trabajas mejor.Jornada intensiva en julio y agosto, además de los viernes.Salario según tu formación y experiencia, con revisiones basadas en resultados.Apoyo económico para el teletrabajo.Acceso a formaciones, certificaciones oficiales, conferencias y cursos.Si te apasionan los datos, quieres trabajar con tecnología de última generación, y buscas un lugar donde tu crecimiento no tenga límites... ¡ Este es tu momento!Mientras tanto, entérate de más ## Related Videos - [From Messy Queries to Scalable Systems - How Data Engineering actually works](https://www.wearedevelopers.com/videos/100203-from-messy-queries-to-scalable-systems-how-data-engineering-actually-works) - [From DevOps to Scaled DevOps: How We’re Rebuilding Continuous Delivery as a Platform](https://www.wearedevelopers.com/videos/100018-from-devops-to-scaled-devops-how-we-re-rebuilding-continuous-delivery-as-a-platform) - [How a Small Team Shrank a Microsoft Monorepo by 94%](https://www.wearedevelopers.com/videos/1236-how-a-small-team-shrank-a-microsoft-monorepo-by-94) - [Enjoying SQL data pipelines with dbt](https://www.wearedevelopers.com/videos/823-enjoying-sql-data-pipelines-with-dbt) - [AI Model Management Life Circles: ML Ops For Generative AI Models From Research to Deployment](https://www.wearedevelopers.com/videos/1152-ai-model-management-life-circles-ml-ops-for-generative-ai-models-from-research-to-deployment) - [DevOps Maturity Check – a way to balance autonomy and alignment](https://www.wearedevelopers.com/videos/58-devops-maturity-check-a-way-to-balance-autonomy-and-alignment) ## Related Articles - [Making Data Warehouses Fast: A Developer’s Story](https://www.wearedevelopers.com/magazine/107-making-data-warehouses-fast-a-developer-s-story) - [Top Big Data Technologies That You Need to Know](https://www.wearedevelopers.com/magazine/108-top-big-data-technologies-that-you-need-to-know) - [Dev Digest 120 - Apple and peers](https://www.wearedevelopers.com/magazine/455-dev-digest-120-apple-and-peers) - [Graph and AI Trends 2026: Why Is AI Running but Not Yet Delivering?](https://www.wearedevelopers.com/magazine/680-graph-and-ai-trends-2026-why-is-ai-running-but-not-yet-delivering) - [Dev Digest 132 - Binging WADFlix?](https://www.wearedevelopers.com/magazine/473-dev-digest-132-binging-wadflix) - [Highest Paying Tech Companies for Developers](https://www.wearedevelopers.com/magazine/220-highest-paying-tech-companies-for-developers)