Data Engineer Cloudera Cdp

Ayesa
Asturias, Spain
22 days ago
Apply on www.buscojobs.com.es
Prepare application

Role details

Contract type
Apprenticeship
Employment type
Full-time (> 32 hours)
Experience required
2 years minimum
Working hours
Regular working hours

Tech stack

Application Programming Interfaces (APIs) Airflow Apache HTTP Server Cloudera Impala Databases Computer Engineering Data Infrastructure Hadoop Distributed File System Apache Hive Java Database Connectivity Cloudera SQL Databases
+7 more
Data Streaming Data Processing Apache Spark Pyspark Apache Kafka Apache Nifi Restful APIs

Job description

¡En Ayesa Digital crecemos Contigo!Experiencia, cualificaciones y habilidades interpersonales, ¿tiene todo lo necesario para triunfar en esta oportunidad?Descúbralo a continuación.Cada profesional de nuestra empresa es importante para nosotros, nos ayudan a crecer de manera diversa y gracias a ellos somos más de ** personas trabajando con el mismo objetivo internacionalmente.Si eres una persona entusiasta y buscas un nuevo reto profesional, ¡Este es tu sitio!Buscamos ampliar nuestro equipo con un/a Data Engineer Cloudera CDP, para participar en el diseño, construcción, evolución y operación de soluciones de ingeniería del dato sobre entornos Cloudera Data Platform, trabajando en proyectos de procesamiento de datos a gran escala y arquitecturas distribuidas.La persona seleccionada trabajará en modalidad de teletrabajo híbrido desde cualquiera de nuestras oficinas en España.¡Anímate a dar el salto!¡Te estamos esperando!¿Qué vas a hacer?Diseñar, desarrollar y mantener pipelines de datos batch y streaming sobre Cloudera Data Platform (CDP).Desarrollar procesos distribuidos utilizando Apache Spark, PySpark, Spark SQL y SQL.Implementar procesos de ingesta, transformación, integración y movimiento de datos mediante Apache NiFi.Desarrollar soluciones de procesamiento en tiempo real con Apache Kafka o tecnologías equivalentes.Gestionar la evolución de esquemas de datos, particionamiento, distribución y compactación en entornos distribuidos.Analizar planes de ejecución, tiempos de procesamiento, consumo de recursos y cuellos de botella para optimizar el rendimiento de las soluciones.Garantizar la calidad del dato mediante reglas de validación, controles de integridad, reconciliación y gestión de incidencias.Integrar plataformas Cloudera con bases de datos, APIs, sistemas de ficheros, plataformas cloud y sistemas corporativos.Colaborar con equipos multidisciplinares para asegurar la correcta explotación y disponibilidad de los datos.Entre otras funciones propias del puesto¿Qué buscamos?Titulación universitaria o formación equivalente en Ingeniería Informática, Telecomunicaciones, Matemáticas, Estadística o disciplinas relacionadas.Experiencia mínima de 3 a 5 años en proyectos de ingeniería del dato.Experiencia de 2 a 3 años trabajando con tecnologías Cloudera en entornos productivos.Certificación oficial Cloudera Data Engineer (imprescindible).Experiencia sólida en:Cloudera Data Platform (CDP).Apache Spark y PySpark.Apache Hive e Impala.Apache Airflow y desarrollo de DAGs.Apache Kafka.HDFS y almacenamiento distribuido.Procesamiento batch y streaming.Procesos incrementales y captura de cambios (CDC).Optimización de consultas y rendimiento.Integraciones mediante APIs REST, JDBC y otros conectores.Capacidad para desenvolverse en entornos de datos complejos y arquitecturas distribuidas.Orientación a la calidad, el rendimiento y la mejora continua.Te Ofrecemos Un Camino Lleno De Aventuras¡Llega hasta donde tú quieras!¡Crece con nuestros programas de desarrollo!Te ayudaremos a marcar tu itinerario de futuro anualmente participando en proyectos vanguardistas con los mejores profesionales del sector.Porque lo importante sois tú y los tuyos : contamos con políticas que facilitan la conciliación entre la vida profesional y personal: Flexibilidad horaria, Smart Job y jornada intensiva en verano.Tú decides cómo usar tu dinero: disfruta de nuestra retribución flexible, contamos con: Seguro médico, Ticket Restaurant, Guardería y Transporte.Plan Bienestar descuentos en viajes, tecnología, formación, deporte, belleza y ¡muchos más!Diviértete participando en los diferentes concursos y actividades que organizamos: ¿te gusta el deporte, escribir, la fotografía?Todo tiene cabida.¡Actualízate! apostamos por un aprendizaje continuo, contamos con formación especializada, certificaciones e idiomas.¡Deja tu huella!Impacta con nuestros proyectos de voluntariado social.¡Únete a la multinacional española tecnológica referente en el mundo!Atendiendo a la Ley Orgánica **, de 22 de marzo, Ayesa Digital se ha marcado como objetivo promover la defensa y aplicación efectiva del principio de igualdad entre hombres y mujeres, evitando cualquier tipo de discriminación laboral por razón de sexo, garantizando así las mismas oportunidades de ingreso.Asimismo, fomentamos la diversidad, rechazando cualquier tipo de discriminación por razones de raza, sexo, diversidad funcional, religión, orientación sexual, identidad sexual, o cualquier otra condición personal o social, apostando por construir un entorno inclusivo y enriquecedor.xbhjioeHay opciones de teletrabajo/trabajo desde casa disponibles para este puesto.

Requirements

Titulación universitaria o formación equivalente en Ingeniería Informática, Telecomunicaciones, Matemáticas, Estadística o disciplinas relacionadas. Experiencia mínima de 3 a 5 años en proyectos de ingeniería del dato. Experiencia de 2 a 3 años trabajando con tecnologías Cloudera en entornos productivos. Certificación oficial Cloudera Data Engineer (imprescindible). Experiencia sólida en: Cloudera Data Platform (CDP). Apache Spark y PySpark. Apache Hive e Impala. Apache Airflow y desarrollo de DAGs. Apache Kafka. HDFS y almacenamiento distribuido. Procesamiento batch y streaming. Procesos incrementales y captura de cambios (CDC). Optimización de consultas y rendimiento. Integraciones mediante APIs REST, JDBC y otros conectores. Capacidad para desenvolverse en entornos de datos complejos y arquitecturas distribuidas. Orientación a la calidad, el rendimiento y la mejora continua., Asimismo, fomentamos la diversidad, rechazando cualquier tipo de discriminación por razones de raza, sexo, diversidad funcional, religión, orientación sexual, identidad sexual, o cualquier otra condición personal o social, apostando por construir un entorno inclusivo y enriquecedor.

About the company

Cada profesional de nuestra empresa es importante para nosotros, nos ayudan a crecer de manera diversa y gracias a ellos somos más de ** personas trabajando con el mismo objetivo internacionalmente., Te ayudaremos a marcar tu itinerario de futuro anualmente participando en proyectos vanguardistas con los mejores profesionales del sector. Porque lo importante sois tú y los tuyos : contamos con políticas que facilitan la conciliación entre la vida profesional y personal: Flexibilidad horaria, Smart Job y jornada intensiva en verano.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.buscojobs.com.es
Prepare application

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

2:15 min

Empowering domain teams with an open data platform

Sandhya Menon Sandhya Menon · World Congress 2026 Europe

3:03 min

Career evolution in data engineering and AI platforms

Maria Apazoglou · Coffee With Developers

4:32 min

Harnessing Spark with Python using PySpark and Py4J

Ayon Roy · LIVE

3:05 min

Audience questions on AI agents and pipeline vectorization

Joy Joy · World Congress 2024

3:37 min

Scaling machine learning pipelines from prototypes to petabytes

Julian Joseph · LIVE

3:09 min

Balancing data science skillings alongside systems engineering rigor

Nico Schmidt · LIVE

Videos

See all

Related articles

See all