Data Engineer

Plexus Tech
Municipality of Marbella, Spain
2 days ago

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
Spanish
Compensation
€ 70K

Job location

Municipality of Marbella, Spain

Tech stack

Amazon Web Services (AWS)
Amazon Web Services (AWS)
Apache HTTP Server
ETL
Amazon DynamoDB
Python
NoSQL
Performance Tuning
Amazon Web Services (AWS)
SQL Databases
AWS Lambda
Data Lake
PySpark

Job description

Plexus Tech busca un/a Tech Lead de Datos en Marbella. El candidato/a ideal liderará el diseño de una plataforma de datos en AWS, definiendo estándares y asegurando la calidad de las soluciones., * Liderar técnicamente el desarrollo de la plataforma de datos en AWS.

  • Definir buenas prácticas y estándares de desarrollo de datos.

  • Supervisar el desarrollo de pipelines ETL/ELT., Buscamos un/a Tech Lead de Datos con amplia experiencia en AWS para liderar el diseño y evolución de una plataforma de datos basada en arquitectura Data Lake / Lakehouse, en un contexto cloud y serverless. Será responsable de la dirección técnica del equipo, definición de estándares y aseguramiento de la calidad de las soluciones de datos. Responsabilidades

  • Liderar técnicamente el desarrollo y evolución de la plataforma de datos en AWS.

  • Diseñar arquitecturas Data Lake / Lakehouse (Medallion, Iceberg).

  • Definir buenas prácticas y estándares de desarrollo de datos.

  • Supervisar el desarrollo de pipelines ETL/ELT con Glue, PySpark y Python.

  • Diseñar soluciones analíticas con Athena (motor SQL).

  • Orquestar procesos con Step Functions y EventBridge.

  • Definir estrategias serverless usando AWS Lambda (ZIP) y su integración con ECS.

  • Gestionar metadatos y gobierno del dato mediante Glue Catalog.

  • Supervisar el uso de almacenamiento NoSQL (DynamoDB).

  • Definir y validar modelos de transformación con dbt.

  • Apoyar en la explotación de datos mediante herramientas como Dremio.

  • Gestión de entornos y automatización con AWS CLI.

  • Diseño de soluciones seguras (gestión de secretos con AWS Secrets Manager).

  • Coordinación técnica con equipos multidisciplinares.

  • Mentorización de perfiles técnicos del equipo.

Requirements

La posición demanda experiencia en arquitecturas Data Lake/Lakehouse y tecnologías como Glue, Athena, y Python. Se valorará experiencia adicional en arquitecturas Lakehouse avanzadas y optimización de rendimiento en Athena., * Experiencia sólida como Data Engineer senior / Tech Lead.

  • Amplia experiencia en AWS, especialmente en servicios de datos., * Experiencia sólida como Data Engineer senior / Tech Lead.

  • Amplia experiencia en AWS (especialmente en servicios de datos y arquitecturas serverless).

  • Experiencia en:

  • S3, Athena, Glue, Lambda, Step Functions, EventBridge

  • ECS y arquitecturas cloud distribuidas

  • Apache Iceberg y arquitecturas Data Lake / Medallion

Apply for this position