Azure Databricks Data Engineer (Galicia)

Descripción de la Empresa

Bluetab, una compañía IBM, se especializa en datos, cloud, ML e IA, y actúa como brazo fuerte de IBM en esos campos.

Responsabilidades

• Desarrollar y optimizar pipelines de datos en Scala, Python o PySpark, ejecutando procesos en Spark y Databricks.
• Diseñar y construir arquitecturas Data Lake y Data Warehouse en entornos Cloud (principalmente Azure).
• Transformar datos a gran escala con Spark, aplicando buenas prácticas de procesamiento distribuido.
• Optimizar queries y almacenamiento en Databricks, garantizando eficiencia y reducción de costos.
• Integrar múltiples fuentes de datos, asegurando su calidad, consistencia y trazabilidad.
• Colaborar con equipos multidisciplinares para mejorar continuamente los procesos de ingesta, transformación y explotación de datos.

Requisitos

• Sólida experiencia en desarrollo con Scala, Python o PySpark sobre Spark.
• E...

Ready to Apply?

Submit your application today and join our talented team at Bluetab, an IBM.