Big Data developer AWS & Kafka

Experis
Madrid, Spain
19 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Experience required
3 years minimum
Working hours
Regular working hours
Job source

Tech stack

Agile Methodology Amazon Web Services Apache HTTP Server Cloud Computing Python (Programming Language) Scrum Methodology Enterprise Software Applications Apache Spark

Job description

Buscamos un/a Desarrollador/a Big Data AWS para incorporarse a un equipo Agile responsable del mantenimiento, evolución y optimización del framework de un Data Lake corporativo.

Participarás en iniciativas orientadas a garantizar la correcta explotación de la información, la escalabilidad de la plataforma y el rendimiento de los procesos de datos.

Funciones

  • Mantenimiento y evolución del framework del Data Lake.
  • Desarrollo y optimización de procesos Big Data sobre AWS.
  • Diseño e implementación de pipelines de datos.
  • Gestión y procesamiento de grandes volúmenes de información.
  • Desarrollo de soluciones basadas en Spark y Python.
  • Integración de fuentes de datos mediante Kafka.
  • Implementación y mantenimiento de arquitecturas basadas en Iceberg y/o Delta Lake.
  • Colaboración con equipos multidisciplinares bajo metodología Agile.
  • Monitorización y mejora continua del rendimiento de la plataforma.

Requirements

  • Experiencia mínima de 3 años en entornos Big Data.
  • Experiencia sólida en:
  • SQL
  • AWS
  • Apache Spark
  • Python
  • Apache Iceberg y/o Delta Lake
  • Apache Kafka
  • Experiencia trabajando en proyectos de ingeniería de datos o plataformas Data Lake.
  • Conocimientos de buenas prácticas de desarrollo y optimización de procesos de datos.
  • Experiencia en entornos Agile (Scrum/Kanban)., * Proyectos con tecnologías punteras.
  • Acompañamiento de un Mentor desde tu incorporación.

Benefits & conditions

  • Formación continua: cursos tech, idiomas y soft skills.
  • Retribución flexible y revisión salarial por desempeño.
  • Estabilidad laboral y posibilidad de rotación entre proyectos.
  • Equipos diversos, multiculturales y orientados a la excelencia.

About the company

En Experis somos especialistas en servicios profesionales y gestión de proyectos IT orientados a tres áreas clave

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.experis.es

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

2:34 min

Capabilities of the Apache Spark processing engine

Ayon Roy · LIVE

1:34 min

Bringing diverse skills to industrial data science roles

Katja Träumner

2:27 min

Introduction to WebAssembly in a cloud computing context

Edo Edo · WWC 2024

2:58 min

Applying agile software methodologies to corporate operational challenges

Kyle Daigle · Coffee With Developers

2:04 min

Comparing offline data analytics with online stream processing

Artem Volk Artem Volk +1 · WWC 2024

3:03 min

Career evolution in data engineering and AI platforms

Maria Apazoglou · Coffee With Developers

Videos

See all

Related articles

See all