Data Engineer (Snowflake/Inglés), Hibrido

Snowflake Data Engineer En Madrid - hibrido: 2 días a la semana en oficinaAños de experiencia: +5Inglés: AvanzadoA continuación, encontrará un desglose completo de todo lo que se requiere de los posibles candidatos, así como la forma de presentar su candidatura.¡Se encargará de diseñar, crear y optimizar flujos de datos utilizando Snowflake e IDMC.Creará y mantendrá flujos de trabajo ETL/ELT y flujos de datos utilizando Snowflake e IDMC para procesar grandes conjuntos de datos de manera eficiente.Diseñará modelos de datos, creará y mantendrá vistas, procedimientos almacenados y otros objetos de base de datos en Snowflake, optimizará el almacenamiento de datos y garantizará la escalabilidad en Snowflake.Implementará la gobernanza de datos, los controles de acceso y el cifrado para proteger la información confidencial.Diseñar, desarrollar e implementar canalizaciones ETL/ELT para migrar datos de Teradata a Snowflake.·Optimizar los procesos de migración garantizando la integridad, la precisión y el rendimiento de los datos.·Crear y gestionar objetos de Snowflake (tablas, vistas, esquemas, etapas, procedimientos).·Implementar y gestionar funciones de Snowflake como Snowpipe, Streams, Tasks y Time Travel.·Desarrollar y mantener modelos de datos, esquemas y procedimientos almacenados en Snowflake SQL.·Supervisar y ajustar el rendimiento de Snowflake, incluyendo el dimensionamiento del almacén de datos y la optimización de consultas, y garantizar un uso eficiente de los recursos y la optimización de costes.·Gestionar etapas externas, integraciones de almacenamiento, seguridad de los datos, controles de acceso y permisos basados en roles en Snowflake·Automatizar la ingesta de datos desde diversas fuentes utilizando conectores de Snowflake y etapas externas con diferentes formatos de archivo, páginas de códigos y cualquier integración con herramientas SaaS (por ejemplo, dbt cloud, Fivetran, Databricks, etc.).·Reescribir y optimizar scripts SQL, macros y procedimientos almacenados de Teradata para que sean compatibles con Snowflake.·Desarrollar scripts reutilizables para la automatización de tareas de migración (Python, Shell, etc.).·Llevar a cabo la conciliación de datos entre Teradata y Snowflake tras la migración.·Trabajar en estrecha colaboración con arquitectos de datos, analistas y partes interesadas del negocio para comprender los requisitos.·Documentar los procesos de migración, las mejores prácticas y las soluciones técnicas.Sólida experiencia práctica con el almacén de datos en la nube Snowflake.·Conocimiento de las funciones de Snowflake: Time Travel, Cloning, Micro-partitions, Streams y Tasks.·Experiencia práctica en funciones de Snowflake como etapas externas, Snowpipe, integración de almacenamiento, formatos de archivo, RBAC, etc.·Amplia experiencia con SQL y diversas tecnologías de bases de datos (Oracle, Teradata, SQL Server, PostgreSQL, etc.).·Conocimiento de las prácticas de DevOps y CI/CD para flujos de datos y flujos de trabajo.·Experiencia en ingeniería de datos o desarrollo de bases de datos, especialmente en migraciones de datos.·Experiencia en diferentes estrategias de procesamiento por lotes y de carga/transformación de datos.·Dominio de la programación de scripts para automatizar tareas regulares o repetitivas (Python, scripts de shell, etc.).·Conocimiento de la arquitectura de Teradata, SQL y utilidades (BTEQ, FastLoad, MultiLoad, TPT).·Experiencia en el análisis y la conversión de funciones específicas de Teradata a sus equivalentes en Snowflake.·Se valorará la certificación Snowflake SnowPro.xbhjioe·Se valorará la experiencia en banca y servicios financieros.

xbhjioe·Se valorará la experiencia en banca y servicios financieros.