Desarrollador/A Big Data ( Spark, Scala Y Sql)

Metrica
Álava, Spain
1 day ago
Apply on www.buscojobs.com.es
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience required
2 years minimum
Working hours
Regular working hours

Tech stack

Agile Methodology Airflow Amazon Web Services Apache HTTP Server Microsoft Azure Big Data Continuous Integration Github Scala (Programming Language) SONAR (Symantec) SQL Databases Data Processing
+7 more
Apache Yarn Apache Spark Data Lakes Jenkins Servicenow Databricks Control M

Job description

Buscamos un/a Big Data Developer con experiencia en el diseño, desarrollo y mantenimiento de pipelines de datos en entornos cloud y arquitecturas Data Lake. La persona se incorporará a un proyecto tecnológico de alto impacto, vinculado al sector bancario y a casos de uso de riesgo de mercado.Diseñar, desarrollar y mantener pipelines de Data Lake utilizando Apache Spark, Scala y SQL.Orquestar procesos batch, dependencias y flujos de trabajo mediante Control-M y Apache Airflow.Implementar procesos de ingesta, transformación, validación y publicación de datos.Optimizar rendimiento, escalabilidad, fiabilidad y costes de cargas de trabajo Spark.Aplicar controles de calidad, trazabilidad y linaje de datos en procesos productivos.Analizar incidencias técnicas y funcionales, identificar causas raíz y proponer mejoras.Dar soporte a procesos en producción y colaborar en la mejora continua operativa.Participar en la planificación, estimación y entrega de desarrollos.Colaborar con equipos Agile, negocio, soporte y áreas funcionales.Más de 2 años de experiencia en Big Data, Data Lake o plataformas de datos cloud.Experiencia práctica y sólida con Apache Spark, Scala y SQL para procesamiento de datos a gran escala.Conocimiento de arquitecturas Data Lake, pipelines productivos, calidad de datos y linaje.Capacidad analítica, orientación a resultados y resolución de problemas.Habilidades de comunicación, trabajo en equipo, adaptabilidad y autonomía.Se valorará positivamenteExperiencia con herramientas de orquestación como Control-M y Apache Airflow.Conocimientos de Databricks, Azure, AWS Compute y YARN.Experiencia con prácticas CI/CD y herramientas como GitHub, Jenkins y Sonar.Conocimiento de monitorización, soporte a producción y gestión de incidencias con herramientas como ServiceNow.Experiencia en proyectos del sector bancario.Conocimientos básicos de riesgo de mercado: pérdidas y ganancias (P&L), valoraciones, métricas de riesgo y reporting regulatorio.Salario competitivo, acorde a la experiencia y conocimientos aportados.Oportunidades de desarrollo profesional y formación continua.Participación en proyectos de alto impacto tecnológico.Entorno de trabajo colaborativo e innovador.Flexibilidad horaria y modalidad de trabajo a definir.#J-*****-Ljbffr

Requirements

Más de 2 años de experiencia en Big Data, Data Lake o plataformas de datos cloud. Experiencia práctica y sólida con Apache Spark, Scala y SQL para procesamiento de datos a gran escala. Conocimiento de arquitecturas Data Lake, pipelines productivos, calidad de datos y linaje. Capacidad analítica, orientación a resultados y resolución de problemas. Habilidades de comunicación, trabajo en equipo, adaptabilidad y autonomía. Se valorará positivamente Experiencia con herramientas de orquestación como Control-M y Apache Airflow. Conocimientos de Databricks, Azure, AWS Compute y YARN. Experiencia con prácticas CI/CD y herramientas como GitHub, Jenkins y Sonar. Conocimiento de monitorización, soporte a producción y gestión de incidencias con herramientas como ServiceNow. Experiencia en proyectos del sector bancario. Conocimientos básicos de riesgo de mercado: pérdidas y ganancias (P&L), valoraciones, métricas de riesgo y reporting regulatorio. Salario competitivo, acorde a la experiencia y conocimientos aportados. Oportunidades de desarrollo profesional y formación continua. Participación en proyectos de alto impacto tecnológico. Entorno de trabajo colaborativo e innovador. Flexibilidad horaria y modalidad de trabajo a definir.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.buscojobs.com.es
Prepare application

Good distractions

Loading talks and stories from around this role…