Senior Data Engineer

Capgemini
Madrid, Spain
17 days ago

Role details

Contract type
Apprenticeship
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
English
Job source

Tech stack

Microsoft Access Artificial Intelligence Microsoft Azure Big Data Cloud Computing Continuous Integration Github SQL Azure Role-Based Access Control Azure Data Lake Azure Data Factory Generative AI
+4 more
Data Lakes Pyspark Azure Synapse Analytics Databricks

Job description

Como Azure Data Engineer, serás responsable de diseñar, desarrollar y optimizar arquitecturas de datos y pipelines en entornos cloud, garantizando un flujo eficiente, seguro y escalable de la información entre los distintos sistemas y equipos., * Colaborarás en el diseño de arquitecturas de datos modernas basadas en Azure.

  • Trabajarás en entornos Cloud dentro del ecosistema Microsoft Azure.
  • Desarrollarás y mantendrás pipelines de datos utilizando Azure Data Factory y Azure Synapse Analytics.
  • Participarás en la creación y mantenimiento de notebooks en PySpark para procesos de transformación y explotación de datos.
  • Aplicarás buenas prácticas de integración continua y despliegue continuo (CI/CD).
  • Colaborarás en la implementación de arquitecturas Lakehouse y modelos Medallion.
  • Velarás por la seguridad y gobierno del dato mediante modelos de control de acceso y gestión de permisos.

Requirements

  • Podrás participar en proyectos end-to-end, desde su definición hasta su puesta en producción., Para desenvolverte bien en la posición se requieren conocimientos en:
  • Experiencia sólida con Azure Data Factory (ADF).
  • Experiencia con Azure Synapse Analytics.
  • Experiencia en Azure SQL Database.
  • Conocimientos y experiencia trabajando con Azure Data Lake Storage (ADLS).
  • Experiencia desarrollando y manteniendo procesos en PySpark.
  • Experiencia como Ingeniero/a de Datos participando en todo el ciclo del dato: ingesta, transformación, almacenamiento, despliegue y monitorización.
  • Conocimientos fundamentales de Azure DevOps y procesos CI/CD.
  • Conocimientos en arquitecturas Medallion (Bronze, Silver y Gold).
  • Conocimientos de seguridad y gestión de accesos: *

  • RBAC (Role-Based Access Control).
  • ABAC (Attribute-Based Access Control).
  • Certificación DP-900.
  • Nivel fluido de inglés oral y escrito.
  • Capacidad de trabajo en equipo, orientación a resultados y buenas habilidades de comunicación., * Experiencia con Delta Lake.
  • Certificación GitHub Foundations.
  • Experiencia trabajando en arquitecturas Lakehouse.
  • Conocimientos de Databricks y ecosistemas Big Data.
  • Experiencia en automatización y despliegues mediante Azure DevOps., * Proyectos variados y desafiantes: Trabajarás en retos multisectoriales, evitando la rutina y exponiéndote a tecnologías diversas.

  • Flexibilidad y modelo híbrido: Cultura orientada al equilibrio vida-trabajo.

  • Aprendizaje continuo:

  • Formación en tecnologías cloud, data governance, visualización…
  • Participación real en proyectos con IA generativa, Business AI y tecnologías emergentes del dato.

  • Diversidad de clientes e innovación constante: Proyectos de impacto real con organizaciones líderes.

  • Entornos colaborativos e inclusivos: Equipos dinámicos, multiculturales y orientados al crecimiento.

  • Crecimiento profesional y “challenge” técnico: Autonomía, mentoring, certificaciones y oportunidades de ampliar tu rol dentro del área de Data & AI.

¿Por qué Capgemini? Nuestros compromisos y prioridades

Nuestro Plan de Igualdad y Código Ético garantizan procesos inclusivos y libres de discriminación, potenciando el talento, en un entorno multicultural y accesible para personas con discapacidad (valoramos positivamente disponer de certificado de discapacidad).

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on es.indeed.com

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

3:28 min

Defining big data and machine learning fundamentals

Ayon Roy · LIVE

6:36 min

Funding open source through GitHub Accelerator and Sponsors

Stormy Peters · WWC 2023

4:32 min

Harnessing Spark with Python using PySpark and Py4J

Ayon Roy · LIVE

3:03 min

Career evolution in data engineering and AI platforms

Maria Apazoglou · Coffee With Developers

2:10 min

Why organizations combine big data and machine learning

Ayon Roy · LIVE

3:37 min

Scaling machine learning pipelines from prototypes to petabytes

Julian Joseph · LIVE

Videos

See all

Related articles

See all