Data Engineer – Big Data
Guarda esta oferta y sigue tu búsqueda
Crea una cuenta gratis para guardar empleos, crear alertas y volver a esta oferta desde tu panel.
Al continuar, aceptas nuestros Términos & Política de Privacidad.
Desarrollar y mantener procesos de ingesta, almacenamiento y transformación de datos con Spark, Scala, Big Query, dbt, SQL y Python.
Trabajar con arquitecturas de datos, gobierno del dato y optimización de procesos productivos.
Participar en la planificación del backlog, estimaciones técnicas y coordinación con el Product Owner.
Colaborar con el cliente, los equipos de IT y negocio, y participar en demos.
Resolver incidencias de producción y supervisar procesos mediante Control-M.
Asegurar las buenas prácticas técnicas y orientar al resto del equipo. Requisitos imprescindiblesBig Data Más de 3 años de experiencia diseñando y desarrollando procesos batch y real time con Apache Spark en el ecosistema Cloudera.
Alto nivel de Scala sobre Spark y conocimientos de Java.
Experiencia con HDFS, Hive, Kudu y Solr.
Conocimiento profundo de Apache Kafka, tanto a nivel de arquitectura como de desarrollo. Cloud – Google Cloud Platform Experiencia con GCP y Big Query.
Conocimientos de dbt, SQL y Python.
Experiencia con Pub/Sub, Dataflow, Cloud Functions y Cloud Storage. Otros requisitos Experiencia con Git/Bitbucket, Jenkins y CI/CD.
Planificación de procesos con Control-M.
Experiencia trabajando con metodologías Scrum.
Autonomía, capacidad de decisión y buenas habilidades de comunicación. Se valorará Experiencia en arquitecturas híbridas on-premise y Cloud.
Conocimientos de Data Fusion, Cloud Bigtable y GKE.
Experiencia en el sector retail.
Participación en la toma de requisitos y análisis funcional en proyectos Big Data/BI. ¿Qué encontrarás?Un proyecto de consultoría y desarrollo para un cliente del sector retail, en el que podrás asumir un papel clave en la arquitectura, evolución y desarrollo de la plataforma de datos.¿Encaja con tu experiencia?#J-18808-Ljbffr
-
Data Engineer
Hace 5 días
Comunidad de Madrid, Comunidad de Madrid, España Bluetab Solutions Group, SL Jornada completaBluetab, an IBM Company. certificados ¡Great Place to Work & Best Work to Place! como una de las mejores compañías para trabajar. Una compañía muy techie que nos ha llevado a ser el brazo fuerte de IBM en Data, Cloud, ML & IA y donde, para empresas clave de diversos sectores, ayudamos a acelerar y optimizar estrategias en plataformas de datos y en la...
-
Data Engineer Big Data
Hace 3 días
Madrid, Community of Madrid, España Tecdata Engineering Jornada completaBuscamos un perfil senior, con más de 3 años de experiencia, que asuma con autonomía la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data (Cloudera / Spark) y con parte en Google Cloud Platform Requisitos Big Data (imprescindible) Más de 3 años diseñando y desarrollando procesos batch y real time con Apache Spark en el...
-
Data Engineer-Big Data. Teletrabajo
Hace 3 días
Madrid, Madrid, España Bluetab Solutions Group, SL Jornada completa¿Are you ready to take your next professional step? Bluetab an IBM Company, in Spain is calling! We are looking for Data & Cloud passionate professionals who want and have the necessary documentation to work in Europe. Working in Spain (Barcelona, Alicante, Bilbao, Madrid) , you could have your cake and eat it; amazing Data and Cloud EMEA...
-
Data Engineer Big Data
Hace 5 días
Comunidad de Madrid, Comunidad de Madrid, España Tecdata Engineering Jornada completaBuscamos un perfil senior, con más de 3 años de experiencia, que asuma con autonomía la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data (Cloudera / Spark) y con parte en Google Cloud Platform Requisitos Big Data (imprescindible) Más de 3 años diseñando y desarrollando procesos batch y real time con Apache Spark en el...
-
Senior Data Engineer Big Data
Hace 6 días
Madrid, Madrid, España Tecdata Engineering Jornada completaSenior Data Engineer Big Data & Cloud Trabajo Hibrido en madrid Contrato indefinido Buscamos un perfil senior, con más de 3 años de experiencia, que asuma con autonomía la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data (Cloudera / Spark) y con parte en Google Cloud Platform. Responsabilidades Diseñar y evolucionar...
-
Data Engineer Big Data
Hace 6 días
Madrid, Madrid, España Jornada completaBuscamos un perfil senior, con más de 3 años de experiencia, que asuma con autonomía la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data (Cloudera / Spark) y con parte en Google Cloud PlatformRequisitosBig Data (imprescindible) Más de 3 años diseñando y desarrollando procesos batch y real time con Apache Spark en el...
-
Senior Data Engineer Big Data
Hace 5 días
Comunidad de Madrid, Comunidad de Madrid, España Tecdata Engineering Jornada completaSenior Data Engineer Big Data & Cloud Trabajo Hibrido en madrid Contrato indefinido Buscamos un perfil senior, con más de 3 años de experiencia, que asuma con autonomía la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data (Cloudera / Spark) y con parte en Google Cloud Platform. Responsabilidades * Diseñar y evolucionar...
-
Senior Data Engineer — Big Data, Spark
Hace 3 días
Madrid, Community of Madrid, España Human Ventures, LLC. Jornada completaOokla is seeking a Senior Data Engineer to join the Data Engineering team and help process the world's best data on internet performance. You will develop tools and pipelines to support data scientists and analysts, using Spark, Redshift, Athena, Iceberg and Airflow in a fast-paced environment. You will collaborate across data science, analytics and product...
-
Senior Data Engineer – Big Data
Hace 3 días
Madrid, Community of Madrid, España Fideo Intelligence Jornada completaOokla, an Accenture company, is seeking a Senior Data Engineer to join its Data Engineering team in Spain. You will develop large-scale data processing jobs across Spark, Redshift, Athena and Airflow, collaborating with data scientists to turn methods into viable products while improving system performance and efficiency. You will mentor juniors, work with...
-
Senior Data Engineer – Big Data
Hace 4 días
Comunidad de Madrid, Comunidad de Madrid, España Fideo Intelligence Jornada completaOokla, an Accenture company, is seeking a Senior Data Engineer to join its Data Engineering team in Spain. You will develop large-scale data processing jobs across Spark, Redshift, Athena and Airflow, collaborating with data scientists to turn methods into viable products while improving system performance and efficiency. You will mentor juniors, work with...