Arquitecto/a de Datos Senior - Big Data | Barcelona | Híbrido
Beigar
Madrid, Spain
3 months ago
- Discuss this with your agent
- Open in Claude
- Open in ChatGPT
Role details
Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Job source
Tech stack
Airflow
Big Data
Databases
Cron
Apache Hadoop
Hadoop Distributed File System
Apache HBase
Apache Hive
Kerberos (Protocol)
NoSQL
Apache Oozie
SQL Databases
+8 more
Data Streaming
Apache Spark
Data Lakes
Kubernetes
Collibra
Apache Flink
Sentry
Apache Kafka
Job description
Importante multinacional del sector defensa busca incorporar un/a Big Data con experiencia en entornos Big Data on premise y arquitecturas distribuidas, para participar en proyectos tecnológicos de alta complejidad y entornos críticos., * Diseñar y mantener arquitecturas Big Data escalables y seguras en entornos on premise.
- Definir procesos de ingesta, transformación y almacenamiento masivo de datos.
- Supervisar el rendimiento, estabilidad y capacidad de plataformas distribuidas.
- Gestionar integración con sistemas corporativos tradicionales y entornos legacy.
- Implementar medidas de seguridad, auditoría y control de accesos en plataformas de datos.
- Documentar arquitecturas, flujos de datos e interfaces técnicas.
- Colaborar con equipos de infraestructura, seguridad y datos.
Requirements
- Orientación al rendimiento y estabilidad operativa.
- Pensamiento crítico y capacidad analítica.
- Comunicación clara y buena documentación técnica.
- Capacidad de coordinación con equipos multidisciplinares.
- Adaptabilidad en entornos híbridos y críticos., * Experiencia en ecosistemas Big Data on premise:
- Hadoop
- Spark
- Hive
- HDFS
- Kafka
- HBase
- Experiencia en diseño de arquitecturas distribuidas sobre clusters bare metal y virtualizados.
- Conocimientos en orquestación y automatización de procesos:
- Airflow
- Oozie
- NiFi
- Cron pipelines
- Nivel avanzado de SQL, modelado dimensional y bases de datos NoSQL.
- Experiencia en:
- planificación de capacidad
- escalado horizontal
- particionamiento y replicación
- Integración con ERPs, bases relacionales y sistemas legacy.
- Gestión de seguridad on premise:
- Kerberos
- Ranger / Sentry
- control de accesos
- auditoría
- cifrado
- Capacidad de documentación técnica.
Se valorará
- Experiencia en arquitecturas Lakehouse on premise:
- Delta Lake
- Iceberg
- Hudi
- Procesamiento en tiempo real:
- Kafka Streams
- Flink
- Storm
- Gobernanza del dato:
- Atlas
- Collibra
- Purview
- Optimización avanzada de clusters Spark/Hadoop.
- Conocimientos de Kubernetes y contenedores en entornos locales.
- Experiencia en entornos aislados o de alta seguridad.
- Experiencia en integración híbrida con cloud pública.
Apply for this position
This job is hosted externally. Click below to view the full posting and apply.
Apply on indeed.comGood distractions
Talks and stories from around this role — technically off-topic, practically not.
Moments
Explore playlistsVideos
See allRelated articles
See all
DS
Dhannush Subramani
about 4 years ago
BB
Benedikt Bischof
Making Data Warehouses Fast: A Developer’s Story
about 4 years ago
EM
Eli McGarvie
Data Engineer Salary UK
about 3 years ago
EM
Eli McGarvie
Data Analyst Salary in the UK
about 3 years ago
LM
Luis Minvielle
Top-Paying Tech Jobs (with Salaries)
over 2 years ago
EM
Eli McGarvie
Highest Paying Tech Companies for Developers
over 3 years ago