Senior Data Engineer

hace 4 semanas

Madrid, España Atradius A tiempo completo

**Atradius**

Atradius, a globally recognized leader in credit insurance and risk management, is currently looking for a skilled Data Engineer to join our dynamic Data Platform & MI team.

**Key Responsibilities**:

- Development of reusable and standardized components to efficiently process, automate and optimize data engineering end-to-end solutions using PySpark.
- Build and maintain data ingestion pipelines to integrate various raw data sources (internal and external) into our cloud-based platform using Oracle GoldenGate.
- Design, maintain and operate Databricks workflows by ensuring the expected run behavior and results.
- Ensure data quality, accuracy, and reliability throughout the entire Medallion architecture.
- Collaborate seamlessly with cross-functional teams (Platform engineers, Data Modelers, Data Architects and Power BI engineers) to comprehend data requirements and interpret business needs, translating them into technically feasible developments.
- Support the Lead Data Engineer with solution design, decision making and implementation phase.
- Contribute to the team by proactively suggesting new ideas for improvement in the data engineering domain. Stay up to date on trends and best practices.

**Requirements**:

- Bachelor's or Master's degree in Computer Science, Engineering, or a related field.
- Fluent spoken and written English
- Minimum of 3 years of hands-on experience as a Data Engineer.
- Proficiency in **Spark**/**PySpark and SQL**:

- Hands-on experience with **Databricks**, particularly with Medallion architecture, to build and manage scalable data pipelines from bronze to gold layer.
- ** Cloud** experience, Microsoft Azure preferred.
- Source repository management and version control (Git), CI/CD knowledge (Azure DevOps) Excellent **problem-solving skills** and attention to detail.
- Strong **communication and collaboration** skills.
- Takes responsibility and feels accountable for own and team.
- Proven ability to work with speed and accuracy to deadlines is essential.

**Nice-to-have**:

- Oracle Golden Gate for Big Data experience.
- Real-time data processing experience.
- Data Modeling experience in Medallion architecture, especially Gold layer read optimizations.
- Experience in Azure Cloud data-related services such as ADF or Azure Functions.
- Databricks native optimization features knowledge.
- Previous experience working in an international team environment.

**What do we offer?**
- A dynamic, international and challenging work environment
- Training and support to reach your full potential including the opportunity for continuous professional development
- Attractive terms and conditions, including competitive salary, pension package and a range of flexible benefits and rewards
- Challenging tasks with individual development and training opportunities

**Equal opportunities for all**

**Do you have any questions about our offer?**

**I am Atradius - Do you want to know who we are?**
- Atradius is a global provider of credit insurance, bond and surety, collections and information services, with a strategic presence in over 50 countries. The products offered by Atradius protect companies around the world against the default risks associated with selling goods and services on credit. Atradius is a member of Grupo Catalana Occidente (GCO.MC), one of the largest insurers in Spain and one of the largest credit insurers in the world._

**Number**:

- 1374

**Title**:

- Senior Data Engineer

**Unit**:

- ITSER-IT Services

**Deadline**:

- 31/07/2024, 16:59

**Employment type**:

- Full time

**Position type**:

- Permanent

**Job experience level**:

- Senior Level

**Country**:

- Netherlands, Amsterdam, Spain, Madrid

  • Senior Big Data Engineer

    hace 1 mes

    Madrid, España Gaming Innovation Group A tiempo completo

    As a Senior Big Data Engineer, you will assume a pivotal role in taking ownership of the analysis, design, building, and support of major realtime big data projects. With a wealth of expertise, the Senior Big Data Engineer designs, creates, and maintains ETL processes, data integrations, and data pipelines, ensuring seamless handling of vast amounts of data....

  • Senior Big Data Engineer

    hace 2 semanas

    Madrid, Madrid, España Gaming Innovation Group A tiempo completo

    As a Senior Big Data Engineer, you will assume a pivotal role in taking ownership of the analysis, design, building, and support of major realtime big data projects. With a wealth of expertise, the Senior Big Data Engineer designs, creates, and maintains ETL processes, data integrations, and data pipelines, ensuring seamless handling of vast amounts of data....

  • Senior Big Data Engineer

    hace 4 semanas

    Madrid, España Gaming Innovation Group A tiempo completo

    As a Senior Big Data Engineer, you will assume a pivotal role in taking ownership of the analysis, design, building, and support of major realtime big data projects. With a wealth of expertise, the Senior Big Data Engineer designs, creates, and maintains ETL processes, data integrations, and data pipelines, ensuring seamless handling of vast amounts of data....

  • Senior Data Engineer

    hace 4 semanas

    Madrid, España LHH A tiempo completo

    Tienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad... Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente. ¿Quiénes son? Se trata de una consultora tecnológica con servicios...

  • Senior Data Engineer

    hace 2 meses

    Madrid, España LHH A tiempo completo

    Tienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad... Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente Requisitos ¿Qué te ofrecen? Contrato indefinido directamente en la...

  • Senior Data Engineer

    hace 4 semanas

    Madrid, España LHH A tiempo completo

    Tienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad... Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente. ¿Quiénes son? Se trata de una consultora tecnológica con servicios...

  • Senior Data Engineer

    hace 4 semanas

    Madrid, España LHH A tiempo completo

    Tienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad... Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente Requisitos ¿Qué te ofrecen? Contrato indefinido directamente en la...

  • Data Engineer Senior

    hace 4 semanas

    Madrid, España Page Personnel España A tiempo completo

    Crear sistemas que puedan almacenar, recuperar y manipular datos para generar soluciones. - Establecer y gestionar flujos de datos para recopilar información de diferentes fuentes. - Planificar, ejecutar y controlar el tratamiento de datos en proyectos de Big Data. - Supervisar y optimizar el rendimiento y la integridad del Data Warehouse. Cliente final...

  • Data Engineer Senior

    hace 4 semanas

    Madrid, España Page Personnel España A tiempo completo

    Crear sistemas que puedan almacenar, recuperar y manipular datos para generar soluciones. - Establecer y gestionar flujos de datos para recopilar información de diferentes fuentes. - Planificar, ejecutar y controlar el tratamiento de datos en proyectos de Big Data. - Supervisar y optimizar el rendimiento y la integridad del Data Warehouse. Cliente final...

  • Data Engineer Senior

    hace 2 semanas

    Madrid, Madrid, España Page Personnel España A tiempo completo

    Crear sistemas que puedan almacenar, recuperar y manipular datos para generar soluciones. Establecer y gestionar flujos de datos para recopilar información de diferentes fuentes. Planificar, ejecutar y controlar el tratamiento de datos en proyectos de Big Data. Supervisar y optimizar el rendimiento y la integridad del Data Warehouse.Cliente final con...

  • Senior Data Engineer

    hace 2 meses

    Madrid, Madrid, España LHH A tiempo completo

    Tienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad...Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente Requisitos ¿Qué te ofrecen? Contrato indefinido directamente en la...

  • Senior Data Engineer

    hace 4 semanas

    Madrid, Madrid, España LHH A tiempo completo

    Tienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad... Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente.¿Quiénes son? Se trata de una consultora tecnológica con servicios...

  • Senior Data Engineer

    hace 2 semanas

    Madrid, Madrid, España LHH A tiempo completo

    Tienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad...Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente Requisitos ¿Qué te ofrecen? Contrato indefinido directamente en la...

  • Senior Data Engineer

    hace 2 semanas

    Madrid, Madrid, España LHH A tiempo completo

    Tienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad... Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente.¿Quiénes son? Se trata de una consultora tecnológica con servicios...

  • Senior Data Engineer

    hace 4 semanas

    Madrid, Madrid, España LHH A tiempo completo

    Tienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad... Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente.¿Quiénes son? Se trata de una consultora tecnológica con servicios...

  • Senior Data Engineer

    hace 4 semanas

    Madrid, Madrid, España LHH A tiempo completo

    Tienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad...Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente Requisitos ¿Qué te ofrecen? Contrato indefinido directamente en la...

  • Senior Data Engineer

    hace 7 días

    Madrid, España Goodhue Senior Living A tiempo completo

    Workload: 100%Join us as a Senior Data Engineer! Lead resilient event-driven processing with cutting-edge event queues. Manage data operations with IaC-based cloud resource management. Optimize "Lakehouse" for structured and unstructured data. Develop efficient ETL/ELT pipelines in SQL and OOP. Implement optimal data models, handle big data, and generate...

  • Senior Data Engineer

    hace 2 semanas

    Madrid, Madrid, España Edelman Data X Intelligence A tiempo completo

    We currently seeking a Senior Data Engineer with 5-7 years' experience. The ideal candidate would have the ability to work independently within an AGILE working environment and have experience working with cloud infrastructure leveraging tools such as Apache Airflow, Databricks, DBT and Snowflake. A familiarity with real-time data processing and AI...

  • Senior Data Engineer

    hace 4 semanas

    Madrid, España Malthus Darwin A tiempo completo

    Malthus Darwin es una empresa de Consultoría, especializada en la búsqueda, selección y evaluación de perfiles IT. Nuestro principal objetivo es proporcionar los mejores recursos humanos a nuestros clientes con la mayor rapidez y la máxima eficacia ofreciendo siempre un servicio de calidad.Actualmente estamos en búsqueda de un/a senior Data Engineer,...

  • Senior Data Engineer

    hace 1 mes

    Madrid, España Malthus Darwin A tiempo completo

    Malthus Darwin es una empresa de Consultoría, especializada en la búsqueda, selección y evaluación de perfiles IT. Nuestro principal objetivo es proporcionar los mejores recursos humanos a nuestros clientes con la mayor rapidez y la máxima eficacia ofreciendo siempre un servicio de calidad.Actualmente estamos en búsqueda de un/a senior Data Engineer,...