Cómo monitorizar y optimizar procesos de Spark usando la Spark Web

Apache Spark ya es una realidad en el mundo de la informática y ahora necesitamos no sólo saber de lo que la tecnología es capaz, necesitamos hacerlo productivo. Para ello necesitamos saber cómo poder auditar cada uno de sus procesos de una manera sencilla y sin necesidad de conocimientos destacados de esta tecnología.

En esta charla Jorge López-Malla os intentará mostrar, usando sus habituales animaciones de slides y entre chistes de Data Scientists, qué herramientas nos proporciona el propio framework de Apache Spark para poder monitorizar el rendimiento de nuestros algoritmos y cómo sacarle partido para mejorar nuestros jobs de Apache Spark, tanto streaming como batch, y ver qué magia hace SparkSQL cuando queremos hacer un simple join.

Tras la charla responderá a cualquier pregunta sobre Apache Spark, Big Data, proyectos o cualquier tema que se os ocurra.

Nota: Después de la charla se servirá algo para picar y beber mientras hacemos networking.