Azure Databricks Data Engineer - lleida (Lérida)

Bluetab, una IBM Company, es una compañía tecnológica especializada en Data, Cloud, ML e IA, y se posiciona como socio principal de IBM en la transformación digital de sus clientes.

• Desarrollar y optimizar pipelines de datos en Scala, Python o PySpark, ejecutando procesos en Spark o en Databricks, garantizando rendimiento, calidad y escalabilidad.
• Diseñar y construir arquitecturas Data Lake y Data Warehouse en entornos Cloud, con preferencia por Azure y, en su defecto, AWS o GCP.
• Transformar datos a gran escala mediante Spark, aplicando buenas prácticas de procesamiento distribuido.
• Optimizar queries y almacenamiento en Databricks, asegurando eficiencia en el consumo de datos y reducción de costos.
• Integrar múltiples fuentes de datos, garantizando su calidad, consistencia y trazabilidad.
• Colaborar con equipos multidisciplinares, impulsando la mejora continua en procesos de ingesta,...