Senior Data Engineer Spark Expert
hace 3 semanas
**Key Responsibilities**:
- Spark Expert: Efficiently process and analyse massive datasets using Spark/Pyspark. Implement, optimize, and fine-tune ETL processes for integrating data from various sources.
- Hands-on experience with Databricks, particularly with Medallion architecture, to build and manage scalable data pipelines.
- Design, develop, and implement large-scale, end-to-end data engineering solutions to support business needs.
- Ensure data quality, accuracy, and reliability throughout the entire data lifecycle.
- Utilize your strong SQL skills to design and optimize complex queries.
- Collaborate seamlessly with cross-functional teams to comprehend data requirements and interpret business needs, translating them into technically feasible developments.
- Knowledge of version control (Git) to manage and track changes in the codebase.
**Requirements**:
- Bachelor’s or Master’s degree in Computer Science, Engineering, or a related field.
- Minimum of 3 years of hands-on experience as a Data Engineer.
- Proficiency in PySpark, SQL, Databricks for big data processing, optimisation, and analytics.
- Cloud experience, Microsoft Azure preferred.
- Excellent problem-solving skills and attention to detail.
- Strong communication and collaboration skills.
- **Fluent in spoken and written English.**:
- Must be able to work under pressure when necessary.
- Self-motivated and proactive in the working environment.
**Nice-to-have**:
- Real-time data processing experience (Spark Streaming)
- Experience in Azure Cloud data-related services as ADF or Azure Functions.
- Knowledge of Data Modelling techniques
- Understanding of data consumption patterns
- Experience working in international team environments.
**What do they offer?**
- A competitive salary
- **Hybrid work, one day at the office 4 days from home**:
- A dynamic, international, and challenging work environment
- Training and support to reach your full potential including the opportunity for continuous professional development
- Attractive terms and conditions, including competitive salary, pension package, and a range of flexible benefits and rewards
- Challenging tasks with individual development and training opportunities.**Date Posted**: Posted 6 hours ago**Location**: Madrid, Spain**Job Title**: Senior Data Engineer | Spark Expert
-
Senior Engineer Spark, Madrid
hace 4 días
Madrid, España Grupo NS A tiempo completoSenior Engineer Spark en Madrid. Desde Grupo NS precisamos incorporar perfiles con experiência como Data Engineer de al menos tres años. Imprescindible conocimiento en el ciclo de vida de modelos analíticos (productivización de los modelos ya desarrollados fine tunning reentrenamiento optimización y refactorización) Conocimiento (e idealmente...
-
Engineer Spark, Madrid
hace 4 días
Madrid, España Grupo NS A tiempo completoEngineer Spark en Madrid. Desde Grupo NS precisamos incorporar un Ingeniere datos senior (mínimo 3 años de experiência con este rol y en las actividades solicitadas) que haya trabajado en la productivización de modelos analíticos. No es un perfil de científico de datos solo debe contar con experiência en el paso a producción de los modelos ya...
-
Data Engineer Spark/kafka
hace 1 semana
Madrid, España e-Frontiers A tiempo completoDesde e-Frontiers estamos buscando profesionales con perfiles de Data Engineer para incorporar en el equipo técnico de Data&Analytics de uno de nuestros clientes, una empresa de soluciones tecnológicas basadas principalmente en Data y Cloud Integration (contrato directo con cliente). Si te encanta trabajar con datos, eres un entusiasta de las nuevas...
-
Data Engineer
hace 4 semanas
Madrid, España e-Frontiers A tiempo completoDesde e-Frontiers estamos buscando profesionales con perfiles de Data Engineer para incorporar en el equipo técnico de Data&Analytics de uno de nuestros clientes, una empresa de soluciones tecnológicas basadas principalmente en Data y Cloud Integration (contrato directo con cliente). Si te encanta trabajar con datos, eres un entusiasta de las nuevas...
-
Spark Data Engineer
hace 3 semanas
Madrid, España Sdg Group A tiempo completoRequisitos mínimos: Estar graduado en Ingeniería Informática o de Telecomunicaciones.Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.Experiencia en arquitectura de...
-
Senior Big Data Engineer
hace 2 semanas
Madrid, España Sdi Digital Group A tiempo completoSenior Big Data Engineer (Python & Spark) - OpenbankCountry : Spain WHAT YOU WILL BE DOING Data Analytics & Models Sr Analyst Openbank is in the middle of a digital transformation, working in startup format and innovating in core banking product development from within. We want to convey a whole new digital experience to our customers and for that reason we...
-
Perfil data con Spark Scala y AWS
hace 1 día
Madrid, España TECDATA ENGINEERING A tiempo completobuscamos un data engineer con experiencia en spark scala y conocimientos en AWS Remoto: 100% Ingles: Hablado y escrito
-
Data Engineer
hace 4 semanas
Madrid, España LJselection A tiempo completoDescripción Nuestro cliente es una consultora tecnológica boutique, nacida hace 20 años en la rebelión del código abierto que promociona soluciones de Transformación Digital, Big data y Cloud a empresas en rápido crecimiento. Actualmente buscan un** Data** **Engineer **para trabajar en un proyecto del sector telecomunicaciones. Necesitan** **un...
-
Data Engineer
hace 4 semanas
Madrid, España Walters People A tiempo completoDesde Walters People, buscamos Data Engineer, para potente empresa especializada en proyectos de Data & Analytics. Buscamos un perfil con: - Dos años de experiência como Data Engineer. - Experiência trabajando con Python, Scala y Spark. - Nível de inglés medio alto. - Valorable experiência en entornos Cloud. Contrato directo con cliente de forma...
-
Senior Big Data Engineer
hace 3 semanas
Madrid, España Santander A tiempo completoSenior Big Data Engineer (Python & Spark) - OpenbankCountry: Spain WHAT YOU WILL BE DOING Data Analytics & Models Sr Analyst Openbank is in the middle of a digital transformation, working in startup format and innovating in core banking product development from within. We want to convey a whole new digital experience to our customers and for that reason...
-
Big Data Engineer
hace 5 días
Madrid, España Aderen A tiempo completoJob Opening ID - 1817 - Project lenght in months - Largo Plazo - Languages - Español - Knowledge area - Skills - Big Data, Spark, Unix/Linux - Rate - Eur - 240-260 - Job Description **BUSCAMOS**: Big Data Engineer **FUNCIONES - TAREAS & CONOCIMIENTOS**: Profesional con experiência de al menos 3 años como Big Data Engineer **Conocimientos...
-
Data Engineer
hace 12 horas
Madrid, España TECDATA ENGINEERING A tiempo completoEn TECDATA estamos buscando un Data Engineer con Experiencia de 3 años -en Spark ,Scala, SQL y Conocimientos en Cloudera, AWS - ingles Avanzado -Remoto 100%
-
Senior Data Engineer
hace 2 semanas
Madrid, España LHH A tiempo completoTienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad... Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente Requisitos ¿Qué te ofrecen? Contrato indefinido directamente en la...
-
Data Engineer
hace 4 días
Madrid, España Alter Solutions A tiempo completo**¿Qué buscamos?** Un perfil de **Data Engineer **con experiência de al menos 4 años utilizando alguna de las siguientes tecnologías: - Dominio de Python - Spark. - AWS Cloud. - Azure Data Lake, Data Factory y Databricks. - CI&CD - Git. - Nível de ingles: C1 **Additional Information**: **¿Qué podemos ofrecerte?** - ** **Modalidad de trabajo:...
-
Senior Data Engineer
hace 2 semanas
Madrid, Madrid, España LHH A tiempo completoTienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad...Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente Requisitos ¿Qué te ofrecen? Contrato indefinido directamente en la...
-
Cloudera Data Engineer
hace 4 días
Madrid, España onhunters A tiempo completoDescripción Desde** onhunters** estamos buscando** CLOUDERA DATA ENGINEER **para trabajar en importante compañía internacional, en **Madrid.** Las funciones a realizar serán: - Optimización de modelos de datos en stack de Cloudera: Impala, Spark, ETL en Hive, HDFS - Migración de datos y analítica avanzada a Cloudera. - Integración de flujos y...
-
Account Planner Intern
hace 5 días
Madrid, España Spark Foundry A tiempo completoCompany Description **Spark Foundry** is a global media agency that exists to bring **HEAT** - Higher Engagement, Affinity, and Transactions - to brands. By combining flawless media fundamentals with aggressive innovation, Spark inspires consumers to pay more attention; to care more about our clients’ brands; and to buy more products and services from...
-
Data Engineer Spark Y Scala Madrid
hace 4 semanas
Madrid, España Twtspain A tiempo completoEn The Whiteam Consulting estamos buscando Data Engineer con inglés yal menos 2-3 años de experiencia para formar parte de un importante proyecto de empresa multinacional, estable a largo plazo , en Madrid ¿Qué buscamos? Necesitamos que domines: ? Spark y Scala ? Inglés B2. Escrito y oral fluido. Se valorará otros conocimientos técnicos como: HDFS,...
-
Data Engineer Cloud Senior
hace 1 semana
Madrid, España Fed IT A tiempo completo**Tenemos un nuevo reto para ti! ¿Buscas un cambio?, ¿estás interesado/a en una nueva oportunidad laboral?** **SU FUNCIÓN**: Mi nombre es Álvaro, Consultor de FED IT y me encuentro en búsqueda de un perfil DATA ENGINEER CLOUD SENIOR para incorporar en plantilla de un importante cliente. **SU PERFIL**: ¿Qué estamos buscando? - Perfil senior con...
-
Data Science Engineer
hace 4 semanas
Madrid, España TEC Partners A tiempo completoJob Type: Permanent Sector: Technology Seniority: Experienced Essential skils: Data Location: Madrid Region: Madrid Region Salary: Negotiable Data Science Engineer - Permanent Role - Minimum 2 years - Madrid Based TEC Partners is looking for a Data Science Engineer to join my clients Data team based in Madrid. You will play a key part in productising...