Data Engineer – Big Data & Cloud
Buscamos Senior Data Engineer – Big Data & Cloud!
¿Tienes experiencia en arquitecturas Big Data, Apache Spark y Cloudera? ¿Te interesa asumir un papel de referencia técnica, combinando arquitectura y desarrollo en entornos híbridos y Cloud? ¡Esta oportunidad puede interesarte!
🔹 Principales responsabilidades
Diseñar y evolucionar arquitecturas de datos batch y real time sobre Cloudera y Google Cloud Platform (GCP).
Desarrollar y mantener procesos de ingesta, almacenamiento y transformación de datos con Spark, Scala, BigQuery, dbt, SQL y Python.
Trabajar con arquitecturas de datos, gobierno del dato y optimización de procesos productivos.
Participar en la planificación del backlog, estimaciones técnicas y coordinación con el Product Owner.
Colaborar con el cliente, los equipos de IT y negocio, y participar en demos.
Resolver incidencias de producción y supervisar procesos mediante Control-M.
Asegurar las buenas prácticas técnicas y orientar al resto del equipo.
🔹 Requisitos imprescindibles
Big Data
Más de 3 años de experiencia diseñando y desarrollando procesos batch y real time con Apache Spark en el ecosistema Cloudera.
Alto nivel de Scala sobre Spark y conocimientos de Java.
Experiencia con HDFS, Hive, Kudu y Solr.
Conocimiento profundo de Apache Kafka, tanto a nivel de arquitectura como de desarrollo.
Cloud – Google Cloud Platform
Experiencia con GCP y BigQuery.
Conocimientos de dbt, SQL y Python.
Experiencia con Pub/Sub, Dataflow, Cloud Functions y Cloud Storage.
Otros requisitos
Experiencia con Git/Bitbucket, Jenkins y CI/CD.
Planificación de procesos con Control-M.
Experiencia trabajando con metodologías Scrum.
Autonomía, capacidad de decisión y buenas habilidades de comunicación.
🔹 Se valorará
Experiencia en arquitecturas híbridas on-premise y Cloud.
Conocimientos de Data Fusion, Cloud Bigtable y GKE.
Experiencia en el sector retail.
Participación en la toma de requisitos y análisis funcional en proyectos Big Data/BI.
💡 ¿Qué encontrarás?
Un proyecto de consultoría y desarrollo para un cliente del sector retail, en el que podrás asumir un papel clave en la arquitectura, evolución y desarrollo de la plataforma de datos.
📩 ¿Encaja con tu experiencia? Envíanos tu CV o contacta con nosotros para conocer más detalles de la oportunidad.
Si conoces a alguien que pueda encajar, ¡comparte esta oferta!
#DataEngineer #BigData #ApacheSpark #Scala #Cloudera #GoogleCloud #GCP #BigQuery #Kafka #DataEngineering #TechJobs
- Estado remoto
- Completamente remoto
Madrid
Lugar de trabajo y cultura
La clave es contar con un equipo humano extraordinariamente preparado y motivado, que renueva constantemente sus conocimientos, y que basa su trabajo en el diálogo continuo, la proximidad a nuestros clientes y la profesionalidad
Acerca de TECDATA ENGINEERING
TECDATA ENGINEERING es un proveedor líder de soluciones y servicios tecnológicos especializado en proyectos globales de tecnología avalado por su portfolio de servicios y productos enfocados a generar valor añadido, aumentar la ventaja competitiva y reducir costes para sus clientes.
Estamos presentes en los sectores económicos más importantes: Banca, Telecomunicaciones, Seguros.