Big Data Developer

CAS
Chantada, Spain
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
Spanish, English
Experience level
Intermediate

Job location

Chantada, Spain

Tech stack

Azure
Big Data
Data Validation
ETL
Hadoop
Shell Script
SQL Databases
Spark
Databricks

Job description

Salario ******Se pueden requerir diversas habilidades interpersonales y experiencia para el siguiente puesto.Por favor, asegúrese de consultar la descripción a continuación con atención.Descripción del puesto:Participación en la definición y automatización de procesos desarrollados en tecnologías Big Data (Spark, Scala) en Market Risk.Colaboración en un equipo enfocado en tareas comunes de Big Data dentro del área, garantizando eficiencia, calidad y escalabilidad de los procesos de datos.Responsabilidades principales:Diseñar, desarrollar y mantener procesos ETL y pipelines de datos en entornos Big DataImplementar modelos de datos y optimizar consultas en plataformas Spark y HadoopValidar y probar datos asegurando consistencia, integridad y calidadColaborar con equipos multidisciplinarios para definir requerimientos y soluciones de datosAutomatizar flujos de trabajo y procesos de datos utilizando herramientas de workflowRequisitos obligatorios:Experiencia mínima de 3 a 5 años en proyectos tecnológicos, diseño de ETL, modelos de datos y pruebas/validación de datosConocimiento técnico de lenguajes de xcskxlj programación (Scala) y plataformas Spark, HadoopConocimiento avanzado de sentencias SQLNivel de inglés B2/C1Conocimiento básico de Shell scriptingDeseable, no obligatorio:Experiencia con Azure DatabricksExperiencia en el sector bancario, especialmente en riesgos de mercado

Requirements

Experiencia mínima de 3 a 5 años en proyectos tecnológicos, diseño de ETL, modelos de datos y pruebas/validación de datos Conocimiento técnico de lenguajes de xcskxlj programación (Scala) y plataformas Spark, Hadoop Conocimiento avanzado de sentencias SQL Nivel de inglés B2/C1 Conocimiento básico de Shell scripting Deseable, no obligatorio: Experiencia con Azure Databricks Experiencia en el sector bancario, especialmente en riesgos de mercado

Apply for this position