ingeniero de datos especializado
Role details
Job location
Tech stack
Job description
NWorld Advisory, Tech & Operations en Galicia busca un ingeniero de datos especializado que se una a un proyecto estratégico en el sector bancario. El candidato ideal debe tener 2-3 años de experiencia real con Apache Spark y ser capaz de manejar grandes volúmenes de datos mediante la construcción y optimización de pipelines., Las responsabilidades incluyen el diseño de procesos de datos complejos, la gestión de la calidad de los datos y la optimización del rendimiento en procesos distribuidos. Se valorará experiencia en proyectos tecnológicos del sector financiero., * Diseño y desarrollo de pipelines utilizando Spark.
- Liderar tareas de ingestión y procesamiento de datos.
- Configuración y despliegue de pipelines mediante archivos HOCON., NWorld Advisory, Tech & Operations en Galicia busca un ingeniero de datos especializado que se una a un proyecto estratégico en el sector bancario. El candidato ideal debe tener 2-3 años de experiencia real con Apache Spark y ser capaz de manejar grandes volúmenes de datos mediante la construcción y optimización de pipelines.
Las responsabilidades incluyen el diseño de procesos de datos complejos, la gestión de la calidad de los datos y la optimización del rendimiento en procesos distribuidos. Se valorará experiencia en proyectos tecnológicos del sector financiero.
Requirements
- 2-3 años de experiencia trabajando con Apache Spark en entornos productivos.
- Conocimientos en computación en memoria y optimización de shuffles.
- Experiencia en resolución de incidencias técnicas complejas.