Desarrollador/a big Data ( Spark, Scala y SQL)
METRICA
Spain
6 days ago
- Discuss this with your agent
- Open in Claude
- Open in ChatGPT
Apply on www.jobleads.com
Prepare application
- Draft this with your agent
- Open in Claude
- Open in ChatGPT
Role details
Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience required
2 years minimum
Working hours
Regular working hours
Job source
Tech stack
Agile Methodology
Airflow
Amazon Web Services
Microsoft Azure
Big Data
Continuous Integration
Github
Scala (Programming Language)
SONAR (Symantec)
SQL Databases
Data Processing
Apache Yarn
+6 more
Apache Spark
Data Lakes
Jenkins
Servicenow
Databricks
Control M
Job description
Buscamos un/a Big Data Developer con experiencia en el diseño, desarrollo y mantenimiento de pipelines de datos en entornos cloud y arquitecturas Data Lake. La persona se incorporará a un proyecto tecnológico de alto impacto, vinculado al sector bancario y a casos de uso de riesgo de mercado.
- Diseñar, desarrollar y mantener pipelines de Data Lake utilizando Apache Spark, Scala y SQL.
- Orquestar procesos batch, dependencias y flujos de trabajo mediante Control-M y Apache Airflow.
- Implementar procesos de ingesta, transformación, validación y publicación de datos.
- Optimizar rendimiento, escalabilidad, fiabilidad y costes de cargas de trabajo Spark.
- Aplicar controles de calidad, trazabilidad y linaje de datos en procesos productivos.
- Analizar incidencias técnicas y funcionales, identificar causas raíz y proponer mejoras.
- Dar soporte a procesos en producción y colaborar en la mejora continua operativa.
- Participar en la planificación, estimación y entrega de desarrollos.
- Colaborar con equipos Agile, negocio, soporte y áreas funcionales.
- Más de 2 años de experiencia en Big Data, Data Lake o plataformas de datos cloud.
- Experiencia práctica y sólida con Apache Spark, Scala y SQL para procesamiento de datos a gran escala.
- Conocimiento de arquitecturas Data Lake, pipelines productivos, calidad de datos y linaje.
- Capacidad analítica, orientación a resultados y resolución de problemas.
- Habilidades de comunicación, trabajo en equipo, adaptabilidad y autonomía.
Se valorará positivamente
- Experiencia con herramientas de orquestación como Control-M y Apache Airflow.
- Conocimientos de Databricks, Azure, AWS Compute y YARN.
- Experiencia con prácticas CI/CD y herramientas como GitHub, Jenkins y Sonar.
- Conocimiento de monitorización, soporte a producción y gestión de incidencias con herramientas como ServiceNow.
- Experiencia en proyectos del sector bancario.
- Conocimientos básicos de riesgo de mercado: pérdidas y ganancias (P&L), valoraciones, métricas de riesgo y reporting regulatorio.
- Salario competitivo, acorde a la experiencia y conocimientos aportados.
- Oportunidades de desarrollo profesional y formación continua.
- Participación en proyectos de alto impacto tecnológico.
- Entorno de trabajo colaborativo e innovador.
- Flexibilidad horaria y modalidad de trabajo a definir.
Requirements
- Más de 2 años de experiencia en Big Data, Data Lake o plataformas de datos cloud.
- Experiencia práctica y sólida con Apache Spark, Scala y SQL para procesamiento de datos a gran escala.
- Conocimiento de arquitecturas Data Lake, pipelines productivos, calidad de datos y linaje.
- Capacidad analítica, orientación a resultados y resolución de problemas.
- Habilidades de comunicación, trabajo en equipo, adaptabilidad y autonomía., * Experiencia con herramientas de orquestación como Control-M y Apache Airflow.
- Conocimientos de Databricks, Azure, AWS Compute y YARN.
- Experiencia con prácticas CI/CD y herramientas como GitHub, Jenkins y Sonar.
- Conocimiento de monitorización, soporte a producción y gestión de incidencias con herramientas como ServiceNow.
- Experiencia en proyectos del sector bancario.
- Conocimientos básicos de riesgo de mercado: pérdidas y ganancias (P&L), valoraciones, métricas de riesgo y reporting regulatorio.
- Salario competitivo, acorde a la experiencia y conocimientos aportados.
- Oportunidades de desarrollo profesional y formación continua.
- Participación en proyectos de alto impacto tecnológico.
- Entorno de trabajo colaborativo e innovador.
- Flexibilidad horaria y modalidad de trabajo a definir.
Apply for this position
This job is hosted externally. Click below to view the full posting and apply.
Apply on www.jobleads.com
Prepare application
- Draft this with your agent
- Open in Claude
- Open in ChatGPT
Good distractions
Loading talks and stories from around this role…