Data Platform Engineer

Prenomics SL
Barcelona, Spain
8 days ago

Role details

Contract type
Apprenticeship
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
Spanish

Job location

Barcelona, Spain

Tech stack

Airflow
Amazon Web Services (AWS)
Amazon Web Services (AWS)
Google BigQuery
Continuous Integration
Data Infrastructure
ETL
Data Warehousing
DevOps
GIT
Data Lake
Data Analytics
Vertica
Docker

Job description

Diseñar, desplegar y operar plataformas de datos escalables y seguras (Data Warehouse/ Data Lake/ Lakehouse), con pipelines batch y streaming, orquestación, repositorio de código y gestión de secretos y ejeccuón de contenedores. Tareas

  1. Arquitectura y construcción de infraestructura de datos
  • Definir y desplegar Data Lake / Data Warehouse / Lakehouse (por ejemplo: S3, Redshift/BigQuery/ClickHouse)
  • Modelado de datos.
  1. Más allá del ETL/DAG
  • Entender y configurar los sistemas de ejecucción detrás de Airflow
  • Integración con Data Lake/DWH, orquestador, repositorio Git, gestión de secretos (AWS Secrets Manager)
  1. Despliegue de infraestructura (DevOps)
  • Infra as Code (CI/CD)
  1. Contenedores y ejeccución
  • Dockerización de jobs/algoritmos (Docker Executor o KubernetesExecutor con Airflow)

Requirements

  • Experiencia trabajando con DWH y modelado de datos
  • Experiencia con proyectos completos de analítica de datos
  • Experiencia CI/CD, * Modalidad de trabajo híbrido
  • Planes de carrera y formaciones en habilidades técnicas y blandas
  • Sistema de retribución flexible (tickets restaurante y transporte)
  • Horas semanales dedicadas al aprendizaje y discusión de tecnologías innovadoras
  • Posibilidad de formar parte a una starup innovadora de ciencias de datos con proyectos increibles en marcha
  • Actividades extralaborales: paintball, afterworks, lase tag, voley playa y mucho más

Apply for this position