Senior Big Data Engineer

hace 4 días


La Coruña, España Jr Spain A tiempo completo

col-wideJob Description:

Hola Data Lover
En SDG, no solo tendrás la oportunidad de formar parte de algo increíble, sino que vivirás lo que significa ser un auténtico especialista enData & Analytics
¿Estás preparadx para embarcarte en esta emocionante aventura?con nosotrxs, podrás potenciar todas tus habilidades y capacidades analíticas, tecnológicas y de negocio.
Es hora de despegar hacia el futuro mediante el poder de los datosÚnete a nosotros y prepárate para romper las reglas y alcanzar tu mejor versión.
Descubre el poder de SDG: líderes globales en la industria del dato
En SDG trabajamos para la mitad de las empresas del IBEX-35, pero también en multitud de compañías internacionales.Gracias al boom de la analítica, estamos en unritmo constante de crecimiento, y desde 1994 nos hemos convertido en elsocio de confianzapara empresas que desean maximizar todo el potencial de sus datos.
Si buscas formar parte de una compañía 100% especializada en#Data & #Analytics, te estamos esperando

Requisitos mínimos:
Estar graduado en Ingeniería Informática o de Telecomunicaciones.

Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.

Experiencia en arquitectura de datos (formato, estructura, particionado, modelado, capas y ciclo de vida) en ambientes Data Lake, Data Lakehouse, Kafka Topics & Partitioning, Schema Registry, etc.

Además será importante que tengas experiencia en algunas de las siguientes herramientas:

Lenguajes: Python, Java o Scala.

Herramientas core del entorno de procesamiento en entornos Big Data, especialmente Apache Spark. Además es importante que tengas conocimientos sólidos de HDFS.

Conocimiento de al menos una plataforma de datos con profundidad: Databricks, AWS EMR, AWS Glue, Elastic Search, GCP Dataflow & Dataproc, etc.

Conocimiento en herramientas de orquestación como Apache Airflow, Azure Data Factory, Databricks workflows,...

Conocimiento y experiencia en el uso de sistemas de control de versiones (VCS), esencialmente Git.

Experiencia en la utilización de al menos una de las tres grandes nubes (AWS, Microsoft Azure o Google Cloud Platform), especialmente en lo relativo a los servicios orientados a procesamiento y disposición de datos.

Requisitos valorables:

Nos gusta estar al día en nuevas tecnologías, así que necesitamos personas que quieran estar en continua evolución y que tengan ganas de aprender y probar nuevas herramientas.

Para nosotrxs el trabajo en equipo es primordial, por lo que buscamos personas que impulsen ese buen ambiente y las sinergias entre compañerxs y diferentes equipos de trabajo.

Qué conozcas lenguajes que están tomando relevancia ahora en el mundo data como Rust o Elixir es algo que valoraremos muy positivamente también.

Cómo trabajamos en un entorno global, será un plus que puedas comunicarte en inglés.

Conocimiento sobre DataOps, Observabilidad, patrones de diseño low-code/no-code,...

Conocimiento de algunas de las tecnologías de data warehousing: Snowflake, BigQuery, Redshift..

Acerca del puesto:

SDG Group es una firma de consultoría global focalizada exclusivamente en soluciones de data & analytics, cubriendo con ello toda la cadena de valor del dato, y proporcionando planes de carrera tanto de consultoría como de especialización para todos aquellos que quieran progresar en el mundo del dato. Además, a través de nuestra cultura Smart Work tendrás la posibilidad de definir el modelo de trabajo que más se adapte a ti y a tus necesidades personales, al mismo tiempo que puedas colaborar en iniciativas de gran impacto para clientes punteros en sus respectivas industrias.
Como data engineer del área de Data Technologies, tu misión será formar parte de equipos multidisciplinares con el objetivo de ayudar a nuestros clientes a abordar iniciativas de datos en entornos de alta complejidad técnica. Tendrás la posibilidad de utilizar un amplio espectro de tecnologías innovadoras para la construcción de soluciones de gestión de datos bajo diversos paradigmas de procesamiento y modelado, aplicando para ello los principios adecuados en términos de desarrollo y arquitectura.
Asimismo, gracias a nuestro path de especialista tendrás la oportunidad de crecer como ingeniero y/o arquitecto Big Data, contando con herramientas y recursos para tu continuo aprendizaje y crecimiento profesional, al mismo tiempo que te involucras en diversos retos que permitan tanto a SDG Group como a nuestros clientes explotar al máximo el valor de sus datos.
Responsabilidades:
Darás tu opinión técnica sobre los procesos y arquitecturas que se desarrollen para nutrir las conversaciones técnicas que se llevan a cabo durante las fases de diseño de la misma, priorizando estrategias dirigidas por metadatos y fundamentadas en DataOps.

Participarás en la toma de requerimientos necesarios para arquitecturas y pipelines de datos.

También llevarás a cabo tareas de desarrollo con diferentes tecnologías, aunque principalmente usamos Spark (tanto para procesos en batch como streaming). Adicionalmente, y aunque nuestros desarrollos habitualmente no se basen en SQL, es importante que tengas la soltura suficiente para hacer exploración de datos.

Somos bastante agnósticos a la tecnología y a la infraestructura en nuestros proyectos, así que es posible que tengas experiencia proyectos en AWS, Azure, GCP u on-premises, por lo que será importante que no te importe estar cambiando de entorno con frecuencia.

A veces también nos toca crear u optimizar tiempos de respuesta en motores de búsqueda, así que cualquier experiencia en Solr o Elastic nos gustará.

Además, en algunos momentos también necesitaremos hacer pruebas de concepto y pruebas con tecnologías nuevas en el mercado y servicios cloud nuevos o que creamos que puedan ser útiles para nuestros proyectos o clientes, por lo que también podrás colaborar en tareas de innovación.

#J-18808-Ljbffr


  • Big Data Developer

    hace 4 semanas


    Castellón de la Plana, España Ntt Data A tiempo completo

    Job DescriptionDesde NTT DATA GDNE, estamos experimentando un gran crecimiento en los últimos años por la gran calidad y pasión que ponemos en nuestras soluciones tecnológicas.Por ello, obtenemos cada año la certificación internacional CMMI-5.La clave de nuestro éxito son las personas. Contamos con un equipo humano de más de 4000 profesionales que...

  • Big Data Developer

    hace 2 semanas


    Castelló de la Plana, Castellón, España Ntt Data A tiempo completo

    Job DescriptionDesde NTT DATA GDNE, estamos experimentando un gran crecimiento en los últimos años por la gran calidad y pasión que ponemos en nuestras soluciones tecnológicas.Por ello, obtenemos cada año la certificación internacional CMMI-5.La clave de nuestro éxito son las personas. Contamos con un equipo humano de más de 4000 profesionales que...

  • Trabajos en Big Data

    hace 4 semanas


    A Coruña, España YoungCapital A tiempo parcial

    Trabajos en Big Data ¿Quieres trabajar en Big Data? Solicita esta vacante y entérate de los últimos trabajos en Big Data. Lo que vas a hacerTrabajar en Big Data nunca antes había sido tan fácil. Y es que, ciertamente, es la profesión del momento: cada vez más, empresas de todo el mundo buscan científicos de datos y analistas de base de datos que...

  • Security Engineer L2

    hace 2 semanas


    La Coruña, La Coruña, España Ntt Data A tiempo completo

    NTT DATA NTT DATA helps clients transform through consulting, industry solutions, business process services, IT modernization and managed services. View company page Want to be a part of our team?The Managed Services Cross Technology Engineer (L2) is responsible for providing a managed service to clients to ensure that their IT infrastructure and systems...

  • Security Engineer L2

    hace 4 semanas


    La Coruña, España Ntt Data A tiempo completo

    .NTT DATA NTT DATA helps clients transform through consulting, industry solutions, business process services, IT modernization and managed services. View company page Want to be a part of our team?The Managed Services Cross Technology Engineer (L2) is responsible for providing a managed service to clients to ensure that their IT infrastructure and systems...


  • La Coruña, La Coruña, España Page Personnel A tiempo completo

    Lead Data Engineer en hibrido.Perfil buscado (Hombre/Mujer) Liderar técnicamente al equipo en la mejora de la escalabilidad estabilidad precisión velocidad y eficiencia de nuestros sistemas de datos existentes. Construir administrar y escalar tuberías de procesamiento de datos. Sentirse cómodo utilizando tecnologías como Python Java Scala entre otras. ...

  • Data Scientist Senior

    hace 2 semanas


    La Coruña, La Coruña, España Zemsania A tiempo completo

    Position: Data Scientist Senior RemotoEmpresa: ZemsaniaAños de experiência requeridos: 3Localización: RemotoDescripción del trabajo:Zemsania, empresa líder en el sector tecnológico, está buscando un/a Data Scientist Senior para incorporarse a uno de nuestros proyectos. Buscamos a alguien con experiência en desarrollo de modelos en producción, que...


  • La Coruña, La Coruña, España Gradiant A tiempo completo

    Volver a ofertas Sobre el área tecnológicaFormarás parte del Área de Seguridad & Privacidad donde podrás participar y liderar proyectos de I+D+i vinculados al sector de la ciberseguridad.Buscamos un perfil con experiencia en la aplicación de Inteligencia Artificial a problemas reales, y en el uso de tecnologías de análisis de datos y Big Data....

  • Azure Data Engineer

    hace 2 semanas


    La Nava de Santiago, Badajoz, España Rdt Ingenieros A tiempo completo

    RDT Engineers is an innovative company whose field of activity is the development of advanced engineering projects.We are looking for a Data Engineer with at least 3 years of experience in Azure solutions.The main function is to provide insights of turbine's technical performance across the business (through KPIs reporting) for the right decision-making.The...

  • Senior Process Engineer

    hace 4 semanas


    La Coruña, España Lonza Group Ltd. A tiempo completo

    Senior Process Engineer (m/f/d) page is loaded Senior Process Engineer (m/f/d) Apply locations ES - Porriño time type Full time posted on Posted Yesterday job requisition id R59666 Today, Lonza is a global leader in life sciences operating across three continents. While we work in science, there's no magic formula to how we do it. Our greatest scientific...

  • Security Engineer L2

    hace 5 días


    La Coruña, España Ntt Data A tiempo completo

    NTT DATA NTT DATA helps clients transform through consulting, industry solutions, business process services, IT modernization and managed services. View company page Want to be a part of our team?The Managed Services Cross Technology Engineer (L2) is responsible for providing a managed service to clients to ensure that their IT infrastructure and systems...

  • Senior Devops Engineer

    hace 2 semanas


    La Coruña, La Coruña, España Apinity A tiempo completo

    Your missionCome join our growing teamapinity is an out-of-the-box SaaS solution to bring your API business strategy to the next level. Our integrated API marketplace enables you access to a wide range of API services with a strong insurance industry focus. As a team, we stand for scalability, agility, and innovation. We embrace cultural diversity with an...

  • Managed Services Engineer

    hace 2 semanas


    La Coruña, La Coruña, España Ntt Data A tiempo completo

    Managed Services Engineer A Coruña A Coruña, Galicia, ES Job Description NTT is a leading global IT solutions and services organisation that brings together people, data and things to create a better and more sustainable future. In today's iNTTerconnected' world, connections matter more now than ever. By bringing together talented people, world-class...

  • Managed Services Engineer

    hace 4 semanas


    La Coruña, España Ntt Data A tiempo completo

    Managed Services Engineer A Coruña A Coruña, Galicia, ES Job Description NTT is a leading global IT solutions and services organisation that brings together people, data and things to create a better and more sustainable future. In today's iNTTerconnected' world, connections matter more now than ever. By bringing together talented people, world-class...

  • Head Of Data Insights

    hace 4 días


    La Coruña, España Lonza Biologics Porriño Slu A tiempo completo

    .Spain, Porrino United Kingdom, Manchester United Kingdom, Slough United States, Portsmouth (New Hampshire) United States, Walkersville (Maryland) Today, Lonza is a global leader in life sciences operating across three continents. While we work in science, there's no magic formula to how we do it. Our greatest scientific solution is talented people working...

  • Msat Data Scientist

    hace 2 semanas


    La Coruña, La Coruña, España Lonza Group Ltd. A tiempo completo

    MSAT Data Scientist (m/f/d) page is loaded MSAT Data Scientist (m/f/d) Apply locations ES - Porriño time type Full time posted on Posted Yesterday job requisition id R60845 Today, Lonza is a global leader in life sciences operating across three continents. While we work in science, there's no magic formula to how we do it. Our greatest scientific solution...


  • La Coruña, España Denodo Technologies, Inc. A tiempo completo

    Select how often (in days) to receive an alert: Country:  ES Job Category:  Product & Solutions Denodo is the leader in data virtualization – providing unmatched performance, unified access to the broadest range of enterprise, Big Data, cloud and unstructured sources, and the agilest data services provisioning and governance – at less than half...

  • Senior Product Developer

    hace 1 semana


    La Coruña, España Denodo Technologies, Inc. A tiempo completo

    .Select how often (in days) to receive an alert: Senior Product Developer Country: ES Job Category: Product & Solutions Denodo is a leader in data management. The award-winning Denodo Platform is the leading data integration, management, and delivery platform using a logical approach to enable self- service BI, data science, hybrid/multi-cloud data...

  • Head Of Data Insights

    hace 1 semana


    La Coruña, España Lonza A tiempo completo

    Today, Lonza is a global leader in life sciences operating across three continents. While we work in science, there's no magic formula to how we do it.Our greatest scientific solution is talented people working together, devising ideas that help businesses to help people.In exchange, we let our people own their careers. Their ideas, big and small, genuinely...


  • La Coruña, La Coruña, España Denodo Technologies, Inc. A tiempo completo

    Select how often (in days) to receive an alert: Country:ESJob Category: Product & Solutions Denodo is the leader in data virtualization – providing unmatched performance, unified access to the broadest range of enterprise, Big Data, cloud and unstructured sources, and the agilest data services provisioning and governance – at less than half the cost of...