Servicio Técnico para Soporte de Desarrollador Big Data Spark
Role details
Job location
Tech stack
Job description
Ingeniería de datos para la gestión y el desarrollo orientado a entornos Big Data , realizando tareas proporcionadas por el cliente como el desarrollo y mantenimiento de la plataforma Data Lake optimizando los procesos actuales y desarrollando según las best practices de la plataforma. El servicio se encargará de desarrollar tareas de Big Data usando la tecnologia Spark., Mejorar o refactorizar algunos procesos heredados para mejorar la eficiencia, eliminar obsolescencias y migrar los procesos a la nube de AWS. Diseñar y desarrollar aplicaciones Scala de alto rendimiento utilizando principios de programación funcional. Integrar soluciones Scala con otras plataformas y desarrollar API para la integración de datos y servicios. Usar frameworks Scala como Spark para optimizar el rendimiento de las aplicaciones. Mantenerse al día con las últimas bibliotecas Scala, como Cats. Crear y gestionar pruebas unitarias y funcionales, colaborando con el equipo de control de calidad para realizar pruebas exhaustivas. Crear y mantener pipelines de integración continua y despliegue continuo (CI/CD). Conocimiento de AWS, Azure y Docker para facilitar la migración de productos a la nube. Configurar, mantener y desarrollar la infraestructura en la nube de aplicaciones web
Requirements
Mínimo 3 años de experiencia
- Experiencia y conocimientos en Spark y Scala (en proyectos de Big Data).
- Haber trabajado con metodologías ágiles y tener conocimientos de Jira, git, etc., Conocimiento de Apache Flink
- Experiencia en proyectos de Banca/ Seguros
- Experiencia en proyectos de AWS
- Procesos y actividades: ETL (procesamiento de datos)
- Muy valorable: Inglés B2 (no motivo de descarte), * Como retribución flexible podemos pedir ticket guardería y también seguro médico + dental.
