Ingeniero/a de Big Data Barcelona (Barcelona)

Descripción de la oferta

Duración de la oferta: hasta el 05/06/2021.

Funciones

• Desarrollo de canalizaciones de procesamiento de datos mediante Spark/Scala.
• Desarrollo de pruebas utilizando Spark/Scala.
• Práctico desarrollo y supervisión de la plataforma en la nube de Azure y varios componentes asociados para la ingesta, transformación y procesamiento de datos.
• Diagnosticar, aislar y resolver eficazmente problemas complejos relacionados con la 
infraestructura de datos, incluida la optimización y la optimización del rendimiento.
• Diseño y escritura de programas de acuerdo con los requisitos funcionales y no funcionales.
• Desarrollar y mantener documentación técnica.
• Sigue los procesos establecidos de control de configuración/cambio

Requisitos

• Grado en ingeniería o similar
• más de 2 años de experiencia trabajando como Ingeniero de Software
• 1 año de experiencia en programación funcional (preferiblemente Scala - gran plus)
• Más de 1 año de experiencia en Apache Spark 2.0 (gran plus)
• Conocimiento de patrones de diseño
• Capacidad para escribir consultas SQL complejas
• Una buena comprensión del cálculo distribuido
• Experiencia en programación R
• Experiencia con tecnologías Hadoop (es decir, Sqoop, Hive, Flume, etc.)
• Integración continua / implementación continua (Azure DevOps)
• Experiencia en exploración de datos utilizando portátiles (portátiles Databricks).
• Experiencia en la automatización de tareas regulares (por ejemplo, actualizaciones de datos) utilizando 
secuencias de comandos bash y python.
• Experiencia con la nube de Azure y con Databricks.

Se ofrece

Además de un salario competitivo y un bono anual, ofrecemos un paquete de beneficios que incluye:
• Amplia gama de capacitaciones internas y externas
• Ticket restaurant
• Opción para trabajar de forma remota hasta el 50% del tiempo semanal
• Seguro de vida