Big Data Engineer
Guarda esta oferta y sigue tu búsqueda
Crea una cuenta gratis para guardar empleos, crear alertas y volver a esta oferta desde tu panel.
Al continuar, aceptas nuestros Términos & Política de Privacidad.
funciones:
- Desarrollar pipelines de procesamiento de datos usando Spark / Scala.
- Desarrollar pruebas usando Spark / Scala.
- Desarrollar y monitorizar de la plataforma en la nube Azure y varios componentes asociados para la ingesta, transformación y procesamiento de datos.
- Diagnosticar, aislar y resolver de forma eficaz problemas complejos relacionados con la infraestructura de datos, incluido el ajuste y la optimización del rendimiento.
- Diseñar y implementar de programas según requisitos funcionales y no funcionales.
- Desarrollar y mantener documentación técnica.
- Seguir los procesos de configuración / control de cambios establecidos.
- Más de 2 años de experiencia trabajando como ingeniero de software.
- Experiencia en programación funcional (preferiblemente Scala
- gran ventaja).
- Más de 1 año de experiencia en Apache Spark 2.0 (gran ventaja).
- Conocimiento de patrones de diseño.
- Capacidad para escribir consultas SQL complejas.
- Una buena comprensión de la computación distribuida. Se valora
- Experiencia en programación R.
- Experiencia con tecnologías Hadoop (Sqoop, Hive, Flume, etc.).
- Experiencia en exploración de datos utilizando cuadernos (cuadernos de Databricks).
- Experiencia en la automatización de tareas regulares (actualizaciones de datos, etc.)usando scripting bash y python.
-
Big Data Engineer
Hace 2 días
Barcelona, Cataluña, España Aldia Jornada completa 60.000 € - 85.000 € Por obraALDIA es una multinacional con sede central en Londres y con presencia en algunos de los principales países de la Unión Europea (Inglaterra, Suecia, España, Francia y Alemania). Nos especializamos en la consultoría tecnológica y de ingeniería. Nuestro core de actividad se centra en las áreas claves de las industrias de Seguros, Finanzas,...
-
Eu Big Data Engineer
Hace 2 días
Barcelona, Cataluña, España CHERY Jornada completaOMODA Motors, part of the Chery Group, is an international automotive brand expanding in Europe. Our European headquarters is in Barcelona, leading the brand’s development across the region.This position is based fully on-site (no remote) at our EU HQ office (Cornella, Barcelona).Why join us?Join the European data platform team of a fast-growing global...
-
Senior Big Data Engineer
Hace 3 días
Barcelona, Cataluña, España Tecnalis-Solution-Providers Jornada completa 90.000 € - 140.000 € Por obraSenior Big Data EngineerDepartment: TechnologyEmployment Type: Full TimeLocation: BarcelonaReporting To: Jake MontebelloDescriptionAt GiG we are looking to hire a Senior Big Data Engineer in our Data department. You will assume a pivotal role in taking ownership of the analysis, design, building, support of major realtime big data projects and contribute...
-
Senior Big Data Engineer
Hace 3 días
barcelona, cataluña, España Gaming Innovation Group Jornada completaSenior Big Data EngineerDepartment: TechnologyEmployment Type: Full TimeLocation: BarcelonaReporting To: Jake MontebelloDescriptionAt GiG we are looking to hire a Senior Big Data Engineer in our Data department. You will assume a pivotal role in taking ownership of the analysis, design, building, support of major realtime big data projects and contribute...
-
Spark & Azure Big Data Engineer
Hace 2 días
Barcelona, Cataluña, España Aldia Jornada completa 60.000 € - 85.000 € Por obraALDIA busca un/a Ingeniero/a de Big Data y Cloud para unirse a su equipo de consultoría en Barcelona. Trabajarás en pipelines de datos con Spark/Scala, pruebas y monitorización de plataformas en Azure, asegurando ingesta, transformación y procesamiento de datos robustos.Se valorará experiencia en Hadoop/Hive y scripting. Se prevé incorporación...
-
Barcelona, Cataluña, España HireHi Jornada completaGiG’s Data department разрабатывает и поддерживает проекты в реальном времени с большими данными, используя информацию для стратегических решений и роста организации.Вакансия предполагает...
-
Senior Big Data Engineer — Real‑Time Pipelines
Hace 3 días
barcelona, cataluña, España Tecnalis-Solution-Providers Jornada completaGiG is seeking a Senior Big Data Engineer in Barcelona to lead design, development and support of major realtime big data projects. You will own ETL pipelines, data validation, and performance optimisations while promoting best practices within the data team.Based in Barcelona with a hybrid work model, you will collaborate across data and technology...
-
Senior Big Data Engineer
Hace 5 días
Barcelona, Barcelonés (comarca); Provincia de Barcelona; Cataluña, España Perk Jornada completaBuilt to tackle the time-consuming, manual work that gets in the way of real work, our tools automate everything from travel bookings to expenses, invoice processing, and more. By eliminating this shadow work that wastes hours, erodes morale, and saps innovation, we're on a mission to power real work, with real impact. Founded in 2015, Perk has grown into...
-
Senior Big Data Engineer
Hace 3 días
barcelona, cataluña, España Gaming Innovation Group Jornada completaGaming Innovation Group is seeking a Senior Big Data Engineer to join the Data department in Barcelona. You will own design, development and support of major realtime big data projects, promoting best practices and robust solutions across data platforms.You will design ETL processes, work with Spark, Kafka, NiFi and ClickHouse, and ensure data quality and...
-
Senior Big Data Engineer
Hace 6 días
Barcelona, Barcelonés (comarca); Provincia de Barcelona; Cataluña, España Zurich Insurance Group Jornada completa 300 € TemporalWe understand that finding the right opportunity can be tough, but I'll try to make it easier. You're reading about Zurich Insurance Group, a global leader in insurance, but this role specifically pertains to our Technology Delivery Center (TDC). Established in Barcelona in 2006, the TDC operates as an integral part of Zurich Insurance Group, providing...
