Data Engineer – Data Lakehouse

hace 3 semanas

Madrid, España Vorwerk IT Services Iberica S.L. A tiempo completo
Data Engineer – Data Lakehouse at Vorwerk IT Services Iberica S.L. | softgarden View job here Data Engineer – Data Lakehouse
  • Full Time
  • Hybrid
  • Calle de María de Molina, 54, 28006 Madrid, España
  • With Professional Experience
  • 8/27/24
Data Engineer – Data Lakehouse

The "Data Engineer – Data Lakehouse" is responsible for the implementation of the appropriate data architecture of the Data Lakehouse for different analytical use cases and to prepare and deliver data for requesters for business intelligence, data exploration and advanced analytics.

 

Main responsibilities and activities:

·    Conception and implementation of data integration and transformation processes to support data driven applications, BI and data science projects.

·       Development of analysis-optimized data architectures based on data lakehouses and file-based storage systems (object stores).

·       Ensuring the scalability and parallelizability of data management processes.

·       Establishment of an efficient operation of the data lakehouse

·       Preparation and provision of data for: Data Analysts, Business Engineers, Data Scientist.

 

Challenges within the scope of the activity:

·       Ensuring seamless integration and consistency of data from diverse sources within the data lakehouse environment.

·       Adhering to data management guidelines, standards, and processes specific to data lakehouses.

·       Staying current with and implementing the latest technologies in the rapidly evolving data lakehouse and analytics landscape.

·       Providing and maintaining scalable, secure, and efficient data lakehouse infrastructure on cloud platforms.

  ·     Coordinating and communicating effectively to implement architectural principles and governance measures within data lakehouse projects.

 

Expertise and skills:

-Several years of professional experience in the development of backend or data management systems, ideally within upscaling, massively parallel environments.

-Very good knowledge of SQL and Python as well as basics of cloud infrastructure.

-Good knowledge of the implementation and application of integration and transformation processes, concepts and technologies.

-Experience with cloud platforms highly desirable.

-Willingness to work in an international team.

-Good coordination and communication skills.

-Successfully completed Bacherlor‘s degree in Information Technology or comparable. 

-3-5 years of professional experience as "Data Engineer".

-Structured thinking and very good analytical skills.

Apply Online Imprint | Privacy Policy Powered by softgarden

  • Data Engineer – Data Lakehouse

    hace 3 semanas

    Madrid, España Vorwerk It Services Iberica S.L. A tiempo completo

    Data Engineer – Data Lakehouse at Vorwerk IT Services Iberica S.L.| softgarden View job here Data Engineer – Data Lakehouse Full Time Hybrid Calle de María de Molina, 54, 28006 Madrid, España With Professional Experience 8/27/24 Data Engineer – Data Lakehouse The "Data Engineer – Data Lakehouse" is responsible for the implementation of the...

  • Data Engineer

    hace 4 días

    Madrid, Madrid, España Vorwerk IT Services Iberica S.L. A tiempo completo

    Data Engineer - Cloud Data PlatformThe Data Engineer - Cloud Data Platform is responsible for designing and implementing a scalable and secure cloud-based data lakehouse architecture to support various analytical use cases and deliver data to business stakeholders for informed decision-making.Main Responsibilities:Conceive and implement data integration and...

  • Data Engineer

    hace 4 días

    Madrid, Madrid, España Vorwerk IT Services Iberica S.L. A tiempo completo

    Data Engineer - Cloud Data PlatformThe Data Engineer - Cloud Data Platform is responsible for designing and implementing a scalable and secure cloud-based data lakehouse architecture to support various analytical use cases and deliver data to business stakeholders for informed decision-making.Main Responsibilities:Conceive and implement data integration and...

  • Data Engineer

    hace 1 mes

    Madrid, España Red Global Limited A tiempo completo

    Data Engineer at RED Global Position: Data Engineer for Machine LearningLocation: RemoteDuration: 12 months / Start ASAPYears of Experience: 5 years in Data Engineering and/or Data Platform Infrastructure, preferably with at least a couple of years of exposure to AWS.Responsibilities:Build the model development environment on AWS.Develop and maintain data...

  • Data Architect

    hace 1 semana

    Madrid, España Capitole Consulting A tiempo completo

    ¡Capitole sigue creciendo y queremos hacerlo contigo!¿Te gustaría trabajar en una empresa puntera tecnológicamente? ¿Buscas un ambiente cercano y con posibilidades de crecimiento profesional? ¡Entonces esta oportunidad es para ti!¿Por qué Capitole?Nuestros empleados lo primero . Creemos en un modelo diferente, más humano, colocamos a las personas en...

  • Data Architect

    hace 1 semana

    Madrid, España Capitole Consulting A tiempo completo

    .¡Capitole sigue creciendo y queremos hacerlo contigo!¿Te gustaría trabajar en una empresa puntera tecnológicamente? ¿Buscas un ambiente cercano y con posibilidades de crecimiento profesional? ¡Entonces esta oportunidad es para ti!¿Por qué Capitole?Nuestros empleados lo primero. Creemos en un modelo diferente, más humano, colocamos a las personas en...

  • Data Engineer

    hace 2 semanas

    Madrid, España Ecf Data, Llc A tiempo completo

    .Our MissionDcycle's mission is to give companies control over sustainability. Sustainability is a very complex language at the methodological level, data engineering, and software development. Yes, sustainability is more about data engineering than saving penguins. However, corporate sustainability teams lack these capabilities. They are unable to meet the...

  • Data Engineer

    hace 2 semanas

    Madrid, España Ecf Data, Llc A tiempo completo

    Our MissionDcycle's mission is to give companies control over sustainability. Sustainability is a very complex language at the methodological level, data engineering, and software development. Yes, sustainability is more about data engineering than saving penguins. However, corporate sustainability teams lack these capabilities. They are unable to meet the...

  • Databricks Data Engineer

    hace 3 meses

    Madrid, España Sdg Group A tiempo completo

    .Requisitos mínimos:- Estar graduado en Ingeniería Informática o de Telecomunicaciones.- Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.- Experiencia en...

  • Data Lake Engineer

    hace 4 semanas

    Madrid, España Sdg Group A tiempo completo

    .Requisitos mínimos:Estar graduado en Ingeniería Informática o de Telecomunicaciones.Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.Experiencia en arquitectura de...

  • Spark Data Engineer

    hace 3 meses

    Madrid, España Sdg Group A tiempo completo

    .Requisitos mínimos:Estar graduado en Ingeniería Informática o de Telecomunicaciones.Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.Experiencia en arquitectura de...

  • Spark Data Engineer

    hace 2 semanas

    Madrid, España Sdg Group A tiempo completo

    .Requisitos mínimos:Estar graduado en Ingeniería Informática o de Telecomunicaciones.Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.Experiencia en arquitectura de...

  • Senior Data Engineer

    hace 3 meses

    Madrid, España Axpo Group A tiempo completo

    **Workload: 100%***: Join us as a Senior Data Engineer! Lead resilient event-driven processing with cutting-edge event queues. Manage data operations with IaC-based cloud resource management. Optimize "Lakehouse" for structured and unstructured data. Develop efficient ETL/ELT pipelines in SQL and OOP. Implement optimal data models, handle big data, and...

  • Streaming Data Engineer

    hace 3 meses

    Madrid, España Sdg Group A tiempo completo

    .En SDG, no solo tendrás la oportunidad de formar parte de algo increíble, ¡sino que vivirás lo que significa ser un auténtico especialista en Data & Analytics!¿Estás preparadx para embarcarte en esta emocionante aventura? con nosotrxs, podrás potenciar todas tus habilidades y capacidades analíticas, tecnológicas y de negocio.¡Es hora de despegar...

  • Spark Data Engineer

    hace 3 meses

    Madrid, España Sdg Group A tiempo completo

    Requisitos mínimos: Estar graduado en Ingeniería Informática o de Telecomunicaciones.Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.Experiencia en arquitectura de...

  • Data Engineer

    hace 3 meses

    Madrid, España Page Personnel España A tiempo completo

    Buscamos un perfil DATA ENGINEER CON AL MENOS 3 AÑOS DE EXPERIENCIA PYTHON, PYSPARK, CLOUD INGLÉS ALTO INGENIERÍA INFORMÁTICA/TELECOMUNICACIONES/MATEMÁTICAS CONTRATO INDEFINIDO|CLIENTE FINAL Buscamos un perfil DATA ENGINEER CON AL MENOS 3 AÑOS DE EXPERIENCIA PYTHON, PYSPARK, CLOUD INGLÉS ALTO INGENIERÍA...

  • Data Engineer

    hace 2 meses

    Madrid, España Walters People A tiempo completo

    Desde Walters People, buscamos Data Engineer, para potente empresa especializada en proyectos de Data & Analytics.Buscamos un perfil con:- Dos años de experiência como Data Engineer.- Experiência trabajando con Python, Scala y Spark.- Nível de inglés medio alto.- Valorable experiência en entornos Cloud.Contrato directo con cliente de forma indefinida,...

  • Data Engineer

    hace 3 meses

    Madrid, España sg tech A tiempo completo

    Descripción **Oferta de Trabajo: Data Engineer en sg tech**: ¡Hola! Estamos buscando un Data Engineer para unirse a nuestro equipo en sg tech. Si eres apasionado por la tecnología y tienes experiência en Azure, Azure Databricks, Spark, Scala, Azure Data Factory y Delta Lake, ¡sigue leyendo! **Posición: Data Engineer**: - ** Empresa**: sg tech - **...

  • Sr. Solution Engineer

    hace 3 semanas

    Madrid, España Prime Data Centers Corporation A tiempo completo

    .Prime Data Centers develops, acquires, and operates data centers for some of the world's largest enterprises. A private firm owned by a group controlling $6 billion in assets, with a 15-year tenure in technology and real estate development, Prime provides customers with ownership options and dynamic leasing models, defining a true corporate...

  • Data Engineer

    hace 3 meses

    Madrid, España Kabel A tiempo completo

    Descripción En Kabel no buscamos súper héroes, te buscamos a ti! para que te unas a nuestro gran equipo. Solo te pedimos tres cosas : el propósito de querer crecer cada día, aportar tu profesionalidad y cooperar con valentía, pasión y excelencia. Para nosotros lo más importante y valioso son las personas, porque nos hacen ser mejores cada día y por...