Senior Data Engineer

Aderen
Municipality of Madrid, Spain
yesterday

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
Spanish
Experience level
Intermediate

Job location

Remote
Municipality of Madrid, Spain

Tech stack

Agile Methodologies
Amazon Web Services (AWS)
Amazon Web Services (AWS)
Cloud Computing
Information Engineering
ETL
Relational Databases
Github
Python
Oracle Applications
SQL Databases
Data Streaming
Spark
State Machines
AWS Lambda
GIT
Data Layers
Data Lake
Information Technology
Amazon Web Services (AWS)
Cloudwatch
Terraform
Software Version Control

Job description

Job Description BUSCAMOS : Senior Data engineer Requisitos Minimos Formación y certificaciones · RF-1 Titulación en áreas técnicas, preferiblemente informática o ingeniería · Ref2.1 Certificación AWS Certified Data Engineer - Associate · Ref2.2 AWS Certified Developer - Associate · Ref2.3 AWS Certified Solutions Architect - Associate Experiencia Experiencia mínima de 4 años en proyectos de ingeniería de datos, integración de información y desarrollo de procesos ETL/ELT, incluyendo la integración de bases de datos relacionales corporativas, especialmente Oracle, con servicios cloud.Entre 5 y 7 de experiencia como ingeniero de datos de Oracle a Cloud Experiencia mínima de 4 años en desarrollo con Python y SQL aplicado al tratamiento, transformación, validación y conciliación de datos procedentes de sistemas corporativos.Experiencia mínima de 3 años en Amazon Web Services (AWS), parcipando en el diseño, desarrollo, despliegue u operación de soluciones de datos y en el desarrollo o mantenimiento de procesos sobre servicios gestionados como AWS Glue, AWS Step Functions, Amazon S3, AWS Lambda, Amazon Athena, AWS Glue Data Catalog, Amazon EventBridge, CloudWatch u otros servicios equivalentes Experiencia de 2 años en procesamiento distribuido de datos mediante Apache Spark o tecnologías equivalentes, incluyendo la opmización de procesos, el tratamiento de grandes volúmenes de información y la resolución de incidencias de rendimiento Entre 3 y 5 años de experiencia en Apache Spark Experiencia en automatización y orquestación de flujos de datos, gestión de dependencias, tratamiento de errores, trazabilidad y monitorización de ejecuciones, así como en control de versiones, despliegues y automatización mediante herramientas como Git, GitHub Actions, Terraform, scripts de despliegue o herramientas equivalentes Conocimientos técnicos Conocimientos técnicos suficientes en arquitecturas Data Lake / Lakehouse, incluyendo organización por capas de datos, gestión de formatos analíticos, particionado de información, catálogos de metadatos y buenas prácticas de explotación analítica.Conocimientos en mecanismos de calidad, gobierno y trazabilidad del dato, incluyendo validación de restricciones, auditoría de procesos, control de consistencia entre sistemas origen y destino, gestión de errores y reprocesos Conocimientos en metodologías ágiles o modelos iterativos de gestión de proyectos, incluyendo planificación de tareas, seguimiento de incidencias, documentación técnica y coordinación con equipos técnicos y funcionales Idioma ? Español OFRECEMOS: · · Contrato en modalidad Freelance Full time · · Oferta económica: 240€/300€ jornada + IVA (según experiencia aportada) · · Proyecto de Larga Duración.Recurrencia en Proyectos · · Localización: Madrid - Teletrabajo (podría haber alguna visita muy puntual a oficina)

Requirements

Job Description BUSCAMOS : Senior Data engineer Requisitos Minimos Formación y certificaciones · RF-1 Titulación en áreas técnicas, preferiblemente informática o ingeniería · Ref2.1 Certificación AWS Certified Data Engineer - Associate · Ref2.2 AWS Certified Developer - Associate · Ref2.3 AWS Certified Solutions Architect - Associate Experiencia Experiencia mínima de 4 años en proyectos de ingeniería de datos, integración de información y desarrollo de procesos ETL/ELT, incluyendo la integración de bases de datos relacionales corporativas, especialmente Oracle, con servicios cloud. Entre 5 y 7 de experiencia como ingeniero de datos de Oracle a Cloud Experiencia mínima de 4 años en desarrollo con Python y SQL aplicado al tratamiento, transformación, validación y conciliación de datos procedentes de sistemas corporativos. Experiencia mínima de 3 años en Amazon Web Services (AWS), parcipando en el diseño, desarrollo, despliegue u operación de soluciones de datos y en el desarrollo o mantenimiento de procesos sobre servicios gestionados como AWS Glue, AWS Step Functions, Amazon S3, AWS Lambda, Amazon Athena, AWS Glue Data Catalog, Amazon EventBridge, CloudWatch u otros servicios equivalentes Experiencia de 2 años en procesamiento distribuido de datos mediante Apache Spark o tecnologías equivalentes, incluyendo la opmización de procesos, el tratamiento de grandes volúmenes de información y la resolución de incidencias de rendimiento Entre 3 y 5 años de experiencia en Apache Spark Experiencia en automatización y orquestación de flujos de datos, gestión de dependencias, tratamiento de errores, trazabilidad y monitorización de ejecuciones, así como en control de versiones, despliegues y automatización mediante herramientas como Git, GitHub Actions, Terraform, scripts de despliegue o herramientas equivalentes Conocimientos técnicos Conocimientos técnicos suficientes en arquitecturas Data Lake / Lakehouse, incluyendo organización por capas de datos, gestión de formatos analíticos, particionado de información, catálogos de metadatos y buenas prácticas de explotación analítica. Conocimientos en mecanismos de calidad, gobierno y trazabilidad del dato, incluyendo validación de restricciones, auditoría de procesos, control de consistencia entre sistemas origen y destino, gestión de errores y reprocesos Conocimientos en metodologías ágiles o modelos iterativos de gestión de proyectos, incluyendo planificación de tareas, seguimiento de incidencias, documentación técnica y coordinación con equipos técnicos y funcionales Idioma ? Español OFRECEMOS: · · Contrato en modalidad Freelance Full time · · Oferta económica: 240€/300€ jornada + IVA (según experiencia aportada) · · Proyecto de Larga Duración.

Apply for this position