Empleos actuales relacionados con Spark Data Engineer - Madrid, Madrid - Sdg Group
-
Data Engineer
hace 1 semana
Madrid Centro, Madrid, España John Snow Labs Inc A tiempo completoJob Title: Data Engineer - Spark/Scala ExpertWe are an international digital consultancy with a strong focus on innovation and employee development. Our team of 28,000 professionals is committed to delivering exceptional results and driving positive change in the world.About the RoleWe are seeking a highly skilled Data Engineer to join our dynamic team in...
-
Data Engineer
hace 1 semana
Madrid Centro, Madrid, España John Snow Labs Inc A tiempo completoJob Title: Data Engineer - Spark/Scala ExpertWe are an international digital consultancy with a strong focus on innovation and employee development. Our team of 28,000 professionals is committed to delivering exceptional results and driving positive change in the world.About the RoleWe are seeking a highly skilled Data Engineer to join our dynamic team in...
-
Data Engineer
hace 2 semanas
Madrid, Madrid, España Inetum A tiempo completoAbout the Role:We are seeking a highly skilled Data Engineer to join our team at Inetum in Madrid. As a Data Engineer, you will play a crucial role in developing and managing our data pipelines, leveraging cutting-edge technologies to drive data-driven decisions.Key Responsibilities:Design, develop, and maintain large-scale data pipelines using...
-
Data Engineer
hace 2 semanas
Madrid, Madrid, España Inetum A tiempo completoAbout the Role:We are seeking a highly skilled Data Engineer to join our team at Inetum in Madrid. As a Data Engineer, you will play a crucial role in developing and managing our data pipelines, leveraging cutting-edge technologies to drive data-driven decisions.Key Responsibilities:Design, develop, and maintain large-scale data pipelines using...
-
Data Engineer
hace 2 semanas
Madrid Centro, Madrid, España Inetum A tiempo completoMission:We are seeking a talented Data Engineer to join our dynamic team in Madrid with a hybrid work model. As a Data Engineer, you will play a crucial role in developing and managing our data pipelines, leveraging cutting-edge technologies to drive data-driven decisions.Key Responsibilities:Develop and manage data pipelines using Spark on Scala for legacy...
-
Data Engineer
hace 2 semanas
Madrid Centro, Madrid, España Inetum A tiempo completoMission:We are seeking a talented Data Engineer to join our dynamic team in Madrid with a hybrid work model. As a Data Engineer, you will play a crucial role in developing and managing our data pipelines, leveraging cutting-edge technologies to drive data-driven decisions.Key Responsibilities:Develop and manage data pipelines using Spark on Scala for legacy...
-
Data Engineer
hace 2 semanas
Madrid Centro, Madrid, España Inetum A tiempo completoAbout the Role:We are seeking a highly skilled Data Engineer to join our team in Madrid. As a Data Engineer, you will play a crucial role in developing and managing our data pipelines, leveraging cutting-edge technologies to drive data-driven decisions.Key Responsibilities:Design and develop streaming processes using Spark Streaming, Spark Structured...
-
Data Engineer
hace 2 semanas
Madrid Centro, Madrid, España Inetum A tiempo completoAbout the Role:We are seeking a highly skilled Data Engineer to join our team in Madrid. As a Data Engineer, you will play a crucial role in developing and managing our data pipelines, leveraging cutting-edge technologies to drive data-driven decisions.Key Responsibilities:Design and develop streaming processes using Spark Streaming, Spark Structured...
-
Data Architect
hace 2 semanas
Madrid, Madrid, España Spark Digital & Analytics A tiempo completoAbout Spark Digital & AnalyticsSpark Digital & Analytics is a leading provider of innovative data-driven solutions, empowering businesses to make informed decisions and stay ahead of the competition. Our team of experts is dedicated to delivering cutting-edge data engineering services that drive business success.Job Title: Data EngineerWe are seeking a...
-
Data Architect
hace 2 semanas
Madrid, Madrid, España Spark Digital & Analytics A tiempo completoAbout Spark Digital & AnalyticsSpark Digital & Analytics is a leading provider of innovative data-driven solutions, empowering businesses to make informed decisions and stay ahead of the competition. Our team of experts is dedicated to delivering cutting-edge data engineering services that drive business success.Job Title: Data EngineerWe are seeking a...
-
Big Data Engineer
hace 2 semanas
Madrid, Madrid, España UST Global A tiempo completoAbout the RoleWe are seeking a highly skilled Big Data Engineer with expertise in Spark/Scala to join our team at UST Global. As a key member of our data engineering team, you will be responsible for designing and implementing large-scale data solutions for our clients.Key ResponsibilitiesDesign and develop scalable data architectures using...
-
Big Data Engineer
hace 2 semanas
Madrid, Madrid, España UST Global A tiempo completoAbout the RoleWe are seeking a highly skilled Big Data Engineer with expertise in Spark/Scala to join our team at UST Global. As a key member of our data engineering team, you will be responsible for designing and implementing large-scale data solutions for our clients.Key ResponsibilitiesDesign and develop scalable data architectures using...
-
Data Architect
hace 2 semanas
Madrid, Madrid, España Spark Digital & Analytics A tiempo completo**About Us**At Spark Digital & Analytics, we're a powerhouse of innovation, a champion among firms, blazing a trail for businesses of all sizes. Our secret weapon? Data. With our unmatched expertise, we bring unparalleled value to our clients, propelling them to new heights of success.**Our Mission**We're on a mission to revolutionise the business landscape,...
-
Data Architect
hace 2 semanas
Madrid, Madrid, España Spark Digital & Analytics A tiempo completo**About Us**At Spark Digital & Analytics, we're a powerhouse of innovation, a champion among firms, blazing a trail for businesses of all sizes. Our secret weapon? Data. With our unmatched expertise, we bring unparalleled value to our clients, propelling them to new heights of success.**Our Mission**We're on a mission to revolutionise the business landscape,...
-
Data Architect
hace 2 semanas
Madrid Centro, Madrid, España Spark Digital & Analytics A tiempo completoAbout Spark Digital & AnalyticsWe are a leading digital and analytics firm that empowers businesses to make data-driven decisions. Our team of experts is dedicated to delivering innovative solutions that drive growth and success.Job SummaryWe are seeking a highly skilled Data Engineer to join our team. As a Data Engineer at Spark Digital & Analytics, you...
-
Data Architect
hace 2 semanas
Madrid Centro, Madrid, España Spark Digital & Analytics A tiempo completoAbout Spark Digital & AnalyticsWe are a leading digital and analytics firm that empowers businesses to make data-driven decisions. Our team of experts is dedicated to delivering innovative solutions that drive growth and success.Job SummaryWe are seeking a highly skilled Data Engineer to join our team. As a Data Engineer at Spark Digital & Analytics, you...
-
Big Data Engineer
hace 2 semanas
Madrid Centro, Madrid, España Ust A tiempo completo{"h1": "Big Data Engineer Job Description", "p": "At UST, we are seeking a highly skilled Big Data Engineer to join our team. As a key member of our engineering team, you will be responsible for designing, developing, and deploying large-scale data processing systems using Spark and Scala. Your expertise will help us deliver innovative data solutions to our...
-
Big Data Engineer
hace 2 semanas
Madrid Centro, Madrid, España Ust A tiempo completo{"h1": "Big Data Engineer Job Description", "p": "At UST, we are seeking a highly skilled Big Data Engineer to join our team. As a key member of our engineering team, you will be responsible for designing, developing, and deploying large-scale data processing systems using Spark and Scala. Your expertise will help us deliver innovative data solutions to our...
-
Data Engineer
hace 1 semana
Madrid, Madrid, España Bluetab Solutions Group, SL A tiempo completoAbout Bluetab Solutions Group, SLWe are a dynamic and innovative company that specializes in data and cloud solutions. Our team is passionate about technology and is committed to delivering high-quality services to our clients.Job DescriptionWe are seeking a highly skilled Data Engineer to join our team. As a Data Engineer, you will be responsible for...
-
Data Engineer
hace 1 semana
Madrid, Madrid, España Bluetab Solutions Group, SL A tiempo completoAbout Bluetab Solutions Group, SLWe are a dynamic and innovative company that specializes in data and cloud solutions. Our team is passionate about technology and is committed to delivering high-quality services to our clients.Job DescriptionWe are seeking a highly skilled Data Engineer to join our team. As a Data Engineer, you will be responsible for...
Spark Data Engineer
hace 3 meses
Requisitos mínimos:
Estar graduado en Ingeniería Informática o de Telecomunicaciones.
Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.
Experiencia en arquitectura de datos (formato, estructura, particionado, modelado, capas y ciclo de vida) en ambientes Data Lake, Data Lakehouse, Kafka Topics & Partitioning, Schema Registry, etc.
Además será importante que tengas experiencia en algunas de las siguientes herramientas:Lenguajes:
Python, Java o Scala.
Herramientas core del entorno de procesamiento en entornos Big Data, especialmente Apache Spark. Además es importante que tengas conocimientos sólidos de HDFS.
Conocimiento de al menos una plataforma de datos con profundidad:
Databricks, AWS EMR, AWS Glue, Elastic Search, GCP Dataflow & Dataproc, etc.
Conocimiento en herramientas de orquestación como Apache Airflow, Azure Data Factory, Databricks workflows,...Conocimiento y experiencia en el uso de sistemas de control de versiones (VCS), esencialmente Git.
Experiencia en la utilización de al menos una de las tres grandes nubes (AWS, Microsoft Azure o Google Cloud Platform), especialmente en lo relativo a los servicios orientados a procesamiento y disposición de datos.
Requisitos valorables:
Nos gusta estar al día en nuevas tecnologías, así que necesitamos personas que quieran estar en continua evolución y que tengan ganas de aprender nuevas tecnologías y probar nuevas herramientas.
Para nosotrxs el trabajo en equipo es primordial, por lo que buscamos personas que impulsen ese buen ambiente y las sinergias entre compañerxs y diferentes equipos de trabajo.
Qué conozcas lenguajes que están tomando relevancia ahora en el mundo data como Rust o Elixir es algo que valoraremos muy positivamente también.
Cómo trabajamos en un entorno global, será un plus que puedas comunicarte en inglés.Conocimiento sobre DataOps, Observabilidad, patrones de diseño low-code/no-code,...
Acerca del puesto:
SDG Group es una firma de consultoría global focalizada exclusivamente en soluciones de data & analytics, cubriendo con ello toda la cadena de valor del dato, y proporcionando planes de carrera tanto de consultoría como de especialización para todos aquellos que quieran progresar en el mundo del dato.
Además, a través de nuestra cultura Smart Work tendrás la posibilidad de definir el modelo de trabajo que más se adapte a ti y a tus necesidades personales, al mismo tiempo que puedas colaborar en iniciativas de gran impacto para clientes punteros en sus respectivas industrias.
Como data engineer del área de Data Technologies, tu misión será formar parte de equipos multidisciplinares con el objetivo de ayudar a nuestros clientes a abordar iniciativas de datos en entornos de alta complejidad técnica.
Tendrás la posibilidad de utilizar un amplio espectro de tecnologías innovadoras para la construcción de soluciones de gestión de datos bajo diversos paradigmas de procesamiento y modelado, aplicando para ello los principios adecuados en términos de desarrollo y arquitectura.
Asimismo, gracias a nuestro path de especialista tendrás la oportunidad de crecer como ingeniero y/o arquitecto Big Data, contando con herramientas y recursos para tu continuo aprendizaje y crecimiento profesional, al mismo tiempo que te involucras en diversos retos que permitan tanto a SDG Group como a nuestros clientes explotar al máximo el valor de sus datos.
Responsabilidades:
Darás tu opinión técnica sobre los procesos y arquitecturas que se desarrollen para nutrir las conversaciones técnicas que se llevan a cabo durante las fases de diseño de la misma, priorizando estrategias dirigidas por metadatos y fundamentadas en DataOps.
Participarás en la toma de requerimientos necesarios para arquitecturas y pipelines de datos.También llevarás a cabo tareas de desarrollo con diferentes tecnologías, aunque principalmente usamos Spark (tanto para procesos en batch como streaming).
Adicionalmente, y aunque nuestros desarrollos habitualmente no se basen en SQL, es importante que tengas la soltura suficiente para hacer exploración de datos.
Somos bastante agnósticos a la tecnología y a la infraestructura en nuestros proyectos, así que es posible que tengas experiencia proyectos en AWS, Azure, GCP u on-premises, por lo que será importante que no te importe estar cambiando de entorno con frecuencia.
A veces también nos toca crear u optimizar tiempos de respuesta en motores de búsqueda, así que cualquier experiencia en Solr o Elastic nos gustará.Además, en algunos momentos también necesitaremos hacer pruebas de concepto y pruebas con tecnologías nuevas en el mercado y servicios cloud nuevos o que creamos que puedan ser útiles para nuestros proyectos o clientes, por lo que también podrás colaborar en tareas de innovación.
#J-18808-Ljbffr