Job Description
Deloitte SW Engineer
Te imaginas participando en la transformación de las principales organizaciones nacionales e internacionales?
En Deloitte estamos comprometidos con generar un impacto en la sociedad, en nuestros clientes y en ti.
Responsabilidades
- Diseñar, desarrollar y optimizar procesos de procesamiento distribuido de datos con Apache Spark.
- Implementar y mantener pipelines de datos en AWS Glue y/o Amazon EMR.
- Colaborar con arquitectos y analistas de datos en la definición de soluciones escalables y de alto rendimiento.
- Analizar e interpretar los QueryPlan generados por Spark y utilizar SparkUI para detectar patrones, cuellos de botella y oportunidades de optimización.
- Asegurar la calidad del código, las pruebas y la documentación técnica.
- Identificar oportunidades de mejora en rendimiento y costes en entornos cloud.
Requisitos
- Experiencia sólida en Apache Spark (PySpark o Scala).
- Conocimiento...
Te imaginas participando en la transformación de las principales organizaciones nacionales e internacionales?
En Deloitte estamos comprometidos con generar un impacto en la sociedad, en nuestros clientes y en ti.
Responsabilidades
- Diseñar, desarrollar y optimizar procesos de procesamiento distribuido de datos con Apache Spark.
- Implementar y mantener pipelines de datos en AWS Glue y/o Amazon EMR.
- Colaborar con arquitectos y analistas de datos en la definición de soluciones escalables y de alto rendimiento.
- Analizar e interpretar los QueryPlan generados por Spark y utilizar SparkUI para detectar patrones, cuellos de botella y oportunidades de optimización.
- Asegurar la calidad del código, las pruebas y la documentación técnica.
- Identificar oportunidades de mejora en rendimiento y costes en entornos cloud.
Requisitos
- Experiencia sólida en Apache Spark (PySpark o Scala).
- Conocimiento...