Ingeniero/a de Datos
Role details
Job location
Tech stack
Job description
Paradigma Digital busca un/a Senior Data Engineer que contribuya al diseño e implementación de una arquitectura de datos. Este rol requiere experiencia en la creación de arquitecturas Lakehouse modernas y en el modelado de relaciones complejas con Bases de Datos de Grafos., * Diseñar e implementar la capa de almacenamiento masivo.
-
Utilizar NebulaGraph para Ingeniería de Grafos.
-
Desarrollar procesos ETL/ELT con Spark y Python.
-
Implementar la capa de observabilidad y catálogo de datos.
-
Configurar flujos de trabajo complejos con Airflow.
-
Implementar Trino como motor de consultas federadas., Ingeniero/a de Datos Senior para contribuir al diseño y la implementación de una arquitectura de datos. El candidato será experto en la creación de arquitecturas Lakehouse modernas (Iceberg) y en el modelado de relaciones complejas mediante Bases de Datos de Grafos (NebulaGraph), garantizando que los datos sean trazables, gobernados y accesibles en entornos de alta seguridad. Responsabilidades
-
Arquitectura Lakehouse: Diseñar e implementar la capa de almacenamiento masivo utilizando Apache Iceberg y Polaris Catalog sobre infraestructura S3/Open S3 (MinIO), asegurando la consistencia y el rendimiento de los datos estratégicos.
Requirements
El candidato ideal debe tener sólidos conocimientos de Python, Apache Spark, y herramientas como Apache Iceberg y NebulaGraph. Se ofrece la oportunidad de ser parte de un equipo innovador en Galicia., * Experiencia en creación de arquitecturas Lakehouse modernas.
- Conocimiento en modelado de relaciones complejas mediante Bases de Datos de Grafos.
- Capacidad para desarrollar procesos ETL/ELT avanzados., Python Apache Spark (PySpark) Lakehouse Apache Iceberg Polaris Catalog S3 / Open S3 (MinIO) NebulaGraph OpenMetadata Apache Airflow Apache Kafka Trino (PrestoSQL)