Ingeniero De Datos Senior Migración Cloudera

Grupo TECDATA Engineering

A Coruña, Spain

10 days ago

Apply on www.buscojobs.com.es

Prepare application

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Working hours

Regular working hours

Job source

www.buscojobs.com.es

Tech stack

Apache HTTP Server BigQuery Information Engineering Hadoop Distributed File System Apache Hive Identity and Access Management Cloudera Scala (Programming Language) Google Cloud Apache Spark Pyspark Apache Kafka

+1 more

Spark Streaming

Job description

Data Engineer - Migración de Cloudera a GCPTrabajo remotoBuscamos un/a Data Engineer senior con experiencia sólida en migraciones de plataformas Cloudera a Google Cloud Platform (GCP).Requisitos ImprescindiblesExperiencia con HDFS y Google Cloud Storage.Experiencia avanzada con Apache Spark, Scala y PySpark, y migración de workloads a Dataproc y Dataproc Serverless.Experiencia en Spark Streaming y Apache Kafka, incluyendo servicios gestionados de Kafka en GCP.Conocimientos de Kudu y soluciones de destino como Cloud SQL, Google Spanner y Bigtable.Experiencia con Hive Metastore, Apache Ranger y gobierno del dato, incluyendo Dataplex, Cloud IAM y BigQuery Policy Tags.Experiencia en migración, validación y optimización de pipelines de datos en entornos cloud.#J-*****-Ljbffr

Requirements

Requisitos ImprescindiblesExperiencia con HDFS y Google Cloud Storage.Experiencia avanzada con Apache Spark, Scala y PySpark, y migración de workloads a Dataproc y Dataproc Serverless.Experiencia en Spark Streaming y Apache Kafka, incluyendo servicios gestionados de Kafka en GCP.Conocimientos de Kudu y soluciones de destino como Cloud SQL, Google Spanner y Bigtable.Experiencia con Hive Metastore, Apache Ranger y gobierno del dato, incluyendo Dataplex, Cloud IAM y BigQuery Policy Tags.Experiencia en migración, validación y optimización de pipelines de datos en entornos cloud.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on www.buscojobs.com.es

Prepare application

Good distractions

Loading talks and stories from around this role…