Senior Data Engineer Spark Expert
hace 6 meses
**Key Responsibilities**:
- Spark Expert: Efficiently process and analyse massive datasets using Spark/Pyspark. Implement, optimize, and fine-tune ETL processes for integrating data from various sources.
- Hands-on experience with Databricks, particularly with Medallion architecture, to build and manage scalable data pipelines.
- Design, develop, and implement large-scale, end-to-end data engineering solutions to support business needs.
- Ensure data quality, accuracy, and reliability throughout the entire data lifecycle.
- Utilize your strong SQL skills to design and optimize complex queries.
- Collaborate seamlessly with cross-functional teams to comprehend data requirements and interpret business needs, translating them into technically feasible developments.
- Knowledge of version control (Git) to manage and track changes in the codebase.
**Requirements**:
- Bachelor’s or Master’s degree in Computer Science, Engineering, or a related field.
- Minimum of 3 years of hands-on experience as a Data Engineer.
- Proficiency in PySpark, SQL, Databricks for big data processing, optimisation, and analytics.
- Cloud experience, Microsoft Azure preferred.
- Excellent problem-solving skills and attention to detail.
- Strong communication and collaboration skills.
- **Fluent in spoken and written English.**:
- Must be able to work under pressure when necessary.
- Self-motivated and proactive in the working environment.
**Nice-to-have**:
- Real-time data processing experience (Spark Streaming)
- Experience in Azure Cloud data-related services as ADF or Azure Functions.
- Knowledge of Data Modelling techniques
- Understanding of data consumption patterns
- Experience working in international team environments.
**What do they offer?**
- A competitive salary
- **Hybrid work, one day at the office 4 days from home**:
- A dynamic, international, and challenging work environment
- Training and support to reach your full potential including the opportunity for continuous professional development
- Attractive terms and conditions, including competitive salary, pension package, and a range of flexible benefits and rewards
- Challenging tasks with individual development and training opportunities.**Date Posted**: Posted 6 hours ago**Location**: Madrid, Spain**Job Title**: Senior Data Engineer | Spark Expert
-
Engineer Data Scala Spark, Hibrido
hace 6 meses
Madrid, España CAS TRAINING A tiempo completoEngineer DATA Scala SPARK en hibrido. Cas Training empresa de referencia con más de 20 años en consultoría tecnológica outsourcing y formación especializada selecciona a un/a para un Engineer DATA Scala SPARK para un importante proyecto en modalidad modalidad híbrida en Madrid **Requisitos**: - Data Engineer con conocimientos de - Scala (mandatory)...
-
Engineer Data Scala Spark, Hibrido
hace 2 meses
Madrid, España Reconocida Empresa A tiempo completoEngineer DATA Scala SPARK en híbrido. Cas Training, empresa de referencia con más de 20 años en consultoría tecnológica, outsourcing y formación especializada, selecciona a un/a Engineer DATA Scala SPARK para un importante proyecto en modalidad híbrida en Madrid.Requisitos Data Engineer con conocimientos de:Scala (mandatory)Spark (mandatory)Python...
-
Data Engineer Con Spark Y Mongodb
hace 1 mes
Madrid, España Tecdata Engineering A tiempo completoBuscamos un Data Engineer con experiencia demostrable de más de 3 años en Spark y MongoDB, para trabajar en proyectos avanzados en la nube.Requisitos:Más de 3 años de experiencia con Spark y MongoDB.Experiencia en algún hiperescalador Cloud, preferiblemente Azure.Capacidad para trabajar de forma autónoma.100% remoto.Esta posición es ideal para alguien...
-
Data Engineer Spark Y Mongodb
hace 1 mes
Madrid, España Tecdata Engineering A tiempo completoDescripción:Estamos en busca de un Data Engineer con experiencia en Spark y MongoDB, así como en entornos de Cloud (preferiblemente Azure) para trabajar en modalidad 100% remota.Buscamos a alguien con capacidad de autogestión y disponibilidad inmediata.Requisitos:Más de 3 años de experiencia con Spark y MongoDB (experiencia demostrable).Experiencia...
-
Data Engineer Spark/scala
hace 3 meses
Madrid, España Inetum Spain A tiempo completo**Company Description** Why INETUM?** We are an international, agile digital consultancy. In the post-digital transformation era, we strive to ensure that each of our 28,000 professionals can continuously renew themselves. Each of them can design their professional journey according to their preferences, collaborate with their clients to practically build...
-
Data Engineer Spark
hace 6 meses
Madrid, España Tuyú Technology A tiempo completoData Engineer Spark - Scala en hibrido.¿Quieres crecer profesionalmente?¿Buscas nuevos retos a nivel profesional?¡Te estamos buscando!En TUYÚ Technology buscamos Data Engineer / Ingeniero de datos para importante cliente especializado en Ingeniería.¿Qué ofrecemos?Trabajar en proyectos de larga duración con una alta carga tecnológica de equipos...
-
Data Engineer Spark
hace 1 semana
Madrid, España Tuyú Technology A tiempo completoData Engineer Spark - Scala¿Quieres crecer profesionalmente? ¿Buscas nuevos retos a nivel profesional? ¡Te estamos buscando! En TUYÚ Technology buscamos Data Engineer / Ingeniero de datos para importante cliente especializado en Ingeniería.¿Qué ofrecemos?Trabajar en proyectos de larga duración con una alta carga tecnológica de equipos...
-
Ca13 - Data Engineer (Python & Spark)
hace 6 meses
Madrid, España Ingefor International A tiempo completoDescripción Desde Ingefor International, buscamos DATA ENGINEER con al menos 2 años de experiência: Requisitos imprescindibles: Data Engineer para realizar la programación de las ingestas y transformaciones del proyecto de Datalake de WH bajo tecnología AWS. - Python Intermedio Obligatorio - Spark Streaming Intermedio Obligatorio
-
Data Engineer
hace 6 meses
Madrid, España CAS TRAINING A tiempo completoData Engineer (Spark Scala Python) en hibrido. Seleccionamos para proyecto de Sector Público ubicado en la zona de Pio XII ( Madrid ) un Data Engineer con mínimo 2 años de experiência con Spark Scala y Python (incluída libreria Pyspark ). - Aportar mínimo 2 años de experiência con Spark Scala y Python. - Conocer lenguaje SQL para consultar bases de...
-
Data Engineer Spark
hace 1 mes
Madrid, España Tuyú Technology A tiempo completoData Engineer Spark - Scala en hibrido.¿Quieres crecer profesionalmente? ¿Buscas nuevos retos a nivel profesional? ¡Te estamos buscando! En TUYÚ Technology buscamos Data Engineer / Ingeniero de datos para importante cliente especializado en Ingeniería.¿Qué ofrecemos?Trabajar en proyectos de larga duración con una alta carga tecnológica de equipos...
-
Data Engineer Spark
hace 1 semana
Madrid, España Tuyú Technology A tiempo completoData Engineer Spark - Scala¿Quieres crecer profesionalmente? ¿Buscas nuevos retos a nivel profesional? ¡Te estamos buscando! En TUYÚ Technology buscamos Data Engineer / Ingeniero de datos para importante cliente especializado en Ingeniería.¿Qué ofrecemos?Trabajar en proyectos de larga duración con una alta carga tecnológica de equipos...
-
Data Engineer
hace 6 meses
Madrid, España Cas Training A tiempo completoData Engineer (Spark Scala Python) en hibrido.Seleccionamos para proyecto de Sector Público ubicado en la zona de Pio XII ( Madrid ) un Data Engineer con mínimo 2 años de experiência con Spark Scala y Python (incluída libreria Pyspark ).- Aportar mínimo 2 años de experiência con Spark Scala y Python.- Conocer lenguaje SQL para consultar bases de...
-
Data Engineer Spark
hace 1 semana
Madrid, España Tuyú Technology A tiempo completoData Engineer Spark - Scala ¿Quieres crecer profesionalmente?¿Buscas nuevos retos a nivel profesional?¡Te estamos buscando!En TUYÚ Technology buscamos Data Engineer / Ingeniero de datos para importante cliente especializado en Ingeniería.¿Qué ofrecemos?Trabajar en proyectos de larga duración con una alta carga tecnológica de equipos...
-
Ca13 - Data Engineer (Python & Spark)
hace 6 meses
Madrid, España Ingefor International A tiempo completoDescripciónDesde Ingefor International, buscamos DATA ENGINEER con al menos 2 años de experiência:Requisitos imprescindibles:Data Engineer para realizar la programación de las ingestas y transformaciones del proyecto de Datalake de WH bajo tecnología AWS.- Python Intermedio Obligatorio- Spark Streaming Intermedio Obligatorio
-
Spark Data Engineer
hace 6 meses
Madrid, España Sdg Group A tiempo completo.Requisitos mínimos:Estar graduado en Ingeniería Informática o de Telecomunicaciones.Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.Experiencia en arquitectura de...
-
Data Engineer Spark Y Mongodb Madrid · Completamente Remoto
hace 2 semanas
Madrid, España buscojobs España A tiempo completoData Engineer Spark y MongoDB Madrid · Completamente remotoDescripción del empleo:Estamos en busca de un Data Engineer con experiencia en Spark y MongoDB, así como en entornos de Cloud (preferiblemente Azure) para trabajar en modalidad 100% remota. Buscamos a alguien con capacidad de autogestión y disponibilidad inmediata.Responsabilidades:Más de 3...
-
Madrid, España buscojobs España A tiempo completoData Engineer Spark y MongoDB Madrid · Completamente remoto Descripción del empleo: Estamos en busca de un Data Engineer con experiencia en Spark y MongoDB, así como en entornos de Cloud (preferiblemente Azure) para trabajar en modalidad 100% remota. Buscamos a alguien con capacidad de autogestión y disponibilidad inmediata. Responsabilidades: Más de...
-
Madrid, España buscojobs España A tiempo completoData Engineer Spark y MongoDB Madrid · Completamente remotoDescripción del empleo:Estamos en busca de un Data Engineer con experiencia en Spark y MongoDB, así como en entornos de Cloud (preferiblemente Azure) para trabajar en modalidad 100% remota. Buscamos a alguien con capacidad de autogestión y disponibilidad inmediata.Responsabilidades:Más de 3...
-
Spark Data Engineer
hace 6 meses
Madrid, España Sdg Group A tiempo completoRequisitos mínimos: Estar graduado en Ingeniería Informática o de Telecomunicaciones.Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.Experiencia en arquitectura de...
-
Spark Data Engineer
hace 21 horas
Madrid, España SDG Group A tiempo completoRequisitos mínimos: Estar graduado en Ingeniería Informática o de Telecomunicaciones. Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming. Experiencia en arquitectura...