Senior Data Engineer
hace 1 mes
Responsibilities:
Design, build, and maintain scalable and robust data pipelines to support analytics and machine learning models, ensuring high data quality and reliability for both batch & real-time use cases. Design, maintain, optimize data models and data structures in tooling such as Snowflake and Databricks. Leverage Databricks for big data processing, ensuring efficient management of Spark jobs and seamless integration with other data services. Utilize PySpark and/or Ray to build and scale distributed computing tasks, enhancing the performance of machine learning model training and inference processes. Monitor, troubleshoot, and resolve issues within data pipelines and infrastructure, implementing best practices for data engineering and continuous improvement. Diagrammatically document data engineering workflows. Collaborate with other Data Engineers, Product Owners, Software Developers and Machine Learning Engineers to implement new product features by understanding their needs and delivery timeously.
Qualifications:
Minimum of 3 years experience deploying enterprise level scalable data engineering solutions. Strong examples of independently developed data pipelines end-to-end, from problem formulation, raw data, to implementation, optimization, and result. Proven track record of building and managing scalable cloud-based infrastructure on AWS (incl. S3, Dynamo DB, EMR). Proven track record of implementing and managing of AI model lifecycle in a production environment. Experience using Apache Airflow (or equivalent) , Snowflake, Lucene-based search engines. Experience with Databricks (Delta format, Unity Catalog). Advanced SQL and Python knowledge with associated coding experience. Strong Experience with DevOps practices for continuous integration and continuous delivery (CI/CD). Experience wrangling structured & unstructured file formats (Parquet, CSV, JSON). Understanding and implementation of best practices within ETL end ELT processes. Data Quality best practice implementation using Great Expectations. Real-time data processing experience using Apache Kafka Experience (or equivalent) will be advantageous. Work independently with minimal supervision. Takes initiative and is action-focused. Mentor and share knowledge with junior team members. Collaborative with a strong ability to work in cross-functional teams. Excellent communication skills with the ability to communicate with stakeholders across varying interest groups. Fluency in spoken and written English. #LI-RT9Edelman Data & Intelligence (DXI) is a global, multidisciplinary research, analytics and data consultancy with a distinctly human mission.We use data and intelligence to help businesses and organizations build trusting relationships with people: making communications more authentic, engagement more exciting and connections more meaningful.DXI brings together and integrates the necessary people-based PR, communications, social, research and exogenous data, as well as the technology infrastructure to create, collect, store and manage first-party data and identity resolution. DXI is comprised of over 350 research specialists, business scientists, data engineers, behavioral and machine-learning experts, and data strategy consultants based in 15 markets around the world.To learn more, visit:-
Senior Data Engineer
hace 2 semanas
Madrid, España LHH A tiempo completoTienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad... Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente Requisitos ¿Qué te ofrecen? Contrato indefinido directamente en la...
-
Senior Data Engineer
hace 2 semanas
Madrid, Madrid, España LHH A tiempo completoTienes experiencia trabajando en proyectos multinacionales? ¿Has trabajado en entornos Cloud? Si buscas un nuevo reto, esta es tu oportunidad...Desde LHH Recruitment Solutions Nos Encontramos En La Búsqueda De Un Senior Data Engineer Para Incorporar En La Plantilla De Nuestro Cliente Requisitos ¿Qué te ofrecen? Contrato indefinido directamente en la...
-
Senior Data Engineer
hace 4 semanas
Madrid, España MALTHUS DARWIN A tiempo completoMalthus Darwin es una empresa de Consultoría, especializada en la búsqueda, selección y evaluación de perfiles IT. Nuestro principal objetivo es proporcionar los mejores recursos humanos a nuestros clientes con la mayor rapidez y la máxima eficacia ofreciendo siempre un servicio de calidad. Actualmente estamos en búsqueda de un/a senior Data Engineer,...
-
Senior Data Engineer
hace 7 días
Madrid, España e-Frontiers A tiempo completoDesde e-Frontiers estamos buscando profesionales con perfil Senior de Data Engineer para incorporar en el equipo técnico de Data&Analytics de uno de nuestros clientes, una empresa de soluciones tecnológicas basadas principalmente en Data y Cloud Integration (contrato directo con cliente). Si te encanta trabajar con datos, eres un entusiasta de las nuevas...
-
Data Engineer Senior Consultant
hace 4 semanas
Madrid, España Jakala A tiempo completo**General information**: **Office** Madrid **Country** Spain **Date Published** 12-Apr-2024 **Ref #** 1188 **Area** IT and Information Systems **Type of Presence** Hybrid **Description & Requirements**: **Data Engineer Senior Consultant** Actualmente estamos buscando un perfil de Data Engineer Senior Consultant para que se incorpore al equipo de...
-
Senior Backend Engineer
hace 4 semanas
Madrid, España Scandit A tiempo completoWhat You Will Do Design, implement and maintain scalable and robust software solutions using Python Build state of the art data platform Establish best practices around data Design, develop, optimize and maintain data pipelines for data from various internal sources Implement data quality checks and validation processes to guarantee the...
-
Senior Data Engineer
hace 4 semanas
Madrid, España Page Personnel España A tiempo completoResponsable del mantenimiento y optimización de los procesos actuales del DataLake. - Identificar junto con las áreas de negocio nuevos datos valiosos para incorporar al DataLake y montar los procesos para su ingesta - Responsable de la creación y el mantenimiento de dashboards con DataStudio (Looker) y de la extracción de datos ad hoc para negocio -...
-
Data Engineer
hace 4 semanas
Madrid, España LJselection A tiempo completoDescripción Nuestro cliente es una consultora tecnológica boutique, nacida hace 20 años en la rebelión del código abierto que promociona soluciones de Transformación Digital, Big data y Cloud a empresas en rápido crecimiento. Actualmente buscan un** Data** **Engineer **para trabajar en un proyecto del sector telecomunicaciones. Necesitan** **un...
-
Senior Data Solution Engineer
hace 2 semanas
Madrid, España Chubb A tiempo completoAbout the Role:We are seeking a passionate and talented Senior Data Solution Engineer with expertise in Data Solutions to join our team. The ideal candidate will be responsible for designing, implementing, and maintaining data solutions using Azure and Snowflake data platforms. You will collaborate with cross-functional teams to understand data requirements,...
-
Senior Data Engineer
hace 1 mes
Madrid, España Zemsania A tiempo completoDescripción En Zemsania, estamos en la búsqueda de un/a Senior Data Engineer con experiência sólida en el diseño de soluciones y desarrollo de procesos de datos en entornos cloud AWS para un proyecto en el sector industrial. Trabajarás para uno de nuestros principales clientes, una empresa multinacional líder en el mercado con presencia en más de 50...
-
Data Engineer Senior Consultant Stem
hace 4 semanas
Madrid, España KPMG A tiempo completoData Engineer Senior Consultant STEM **Ubicación**:Madrid, ES, 28046**Fecha**:18 nov. 2023Entonces eres KPMG Originals. Un modo de entender la vida y tu profesión diferente desde donde marcar la diferencia. Un modo de crecer en un ambiente profesional que busca cambiar las cosas, transformar las empresas y la sociedad. Ven, alcanza tus metas, supera tus...
-
Data Engineer
hace 4 semanas
Madrid, España Page Personnel España A tiempo completo3 años de experiência como Data Engineer. Valorable CI/CD y certificación en GCP. Full remote|Proyección profesional 3 años de experiência como Data Engineer. Valorable CI/CD y certificación en GCP. Consultora con sede en Madrid dedicada al desarrollo de productos tecnológicos Oportunidades de carrera y desarrollo profesional. 3 años de...
-
Data Engineer
hace 4 semanas
Madrid, España Page Personnel España A tiempo completoBuscamos un perfil DATA ENGINEER CON AL MENOS 3 AÑOS DE EXPERIENCIA PYTHON, PYSPARK, CLOUD INGLÉS ALTO INGENIERÍA INFORMÁTICA/TELECOMUNICACIONES/MATEMÁTICAS CONTRATO INDEFINIDO|CLIENTE FINAL Buscamos un perfil DATA ENGINEER CON AL MENOS 3 AÑOS DE EXPERIENCIA PYTHON, PYSPARK, CLOUD INGLÉS ALTO INGENIERÍA...
-
Data Collection Engineer Senior
hace 4 semanas
Madrid, España BMIND A tiempo completo**¡En JAKALA IBERIA seguimos creciendo!**: **MODELO HÍBRIDO Y HORARIO FLEXIBLE** En **JAKALA Iberia** ***no paramos de crecer. Cada semana contamos con nuevas oportunidades y, en esta ocasión, buscamos un perfil de **Data Collection** **Engineer Senior** ***para incorporarse en el equipo de **Data Collection **y trabajar en proyectos a nível transversal...
-
Data Collection Engineer Senior
hace 1 mes
Madrid, España BMIND A tiempo completo**¡En JAKALA IBERIA seguimos creciendo!**: En **JAKALA Iberia** **no paramos de crecer. Cada semana contamos con nuevas oportunidades y, en esta ocasión, buscamos un perfil de **Data Collection **Engineer Senior** **para incorporarse en el equipo de **Data Collection **y trabajar en proyectos a nível transversal en el mundo del dato y la...
-
Data Engineer
hace 4 semanas
Madrid, España Walters People A tiempo completoDesde Walters People, buscamos Data Engineer, para potente empresa especializada en proyectos de Data & Analytics. Buscamos un perfil con: - Dos años de experiência como Data Engineer. - Experiência trabajando con Python, Scala y Spark. - Nível de inglés medio alto. - Valorable experiência en entornos Cloud. Contrato directo con cliente de forma...
-
Senior Data Engineer
hace 1 mes
Madrid, España KPMG Spain A tiempo completo**¿Qué podrás hacer?** Como **Senior** **Data Engineer **, serás responsable de participar en el desarrollo de soluciones de Data Analytics en su sentido más amplio para las diferentes áreas de Tax & Legal de KPMG Abogados. Necesitamos a alguien como tú para que nos ayude en los siguientes ámbitos: - Comprensión de los problemas de negocio y su...
-
Data Engineer
hace 4 semanas
Madrid, España Hays A tiempo completoHAYS BUSINESS SERVICES ES LA LÍNEA DE CONSULTORÍA DE NEGOCIO DEL GRUPO HAYS En Hays estamos colaborando con una compañía global de datos, análisis y tecnología que gestiona, integra y analiza datos de más de 820 millones de consumidores y más de 91 millones de empresas de todo el mundo. Con sede corporativa en Atlanta, Georgia, tiene más de 10.800...
-
Senior Devops Engineer
hace 2 semanas
Madrid, España Yantech Associates A tiempo completoSenior DevOps Engineer YanTech Associates have partnered with a top eCommerce company in Europe who are looking to expand their DevOps team in Spain with another Senior DevOps Engineer. Key Responsibilities: Work closely with development and data engineering teams Take the lead in automating and optimizing operations and workflows Develop, implement, and...
-
Senior Engineer Spark, Madrid
hace 7 días
Madrid, España Grupo NS A tiempo completoSenior Engineer Spark en Madrid. Desde Grupo NS precisamos incorporar perfiles con experiência como Data Engineer de al menos tres años. Imprescindible conocimiento en el ciclo de vida de modelos analíticos (productivización de los modelos ya desarrollados fine tunning reentrenamiento optimización y refactorización) Conocimiento (e idealmente...
