Co to jest Spark UI? Przegląd

Z grubsza ogarniesz to w: 3 min

Spark UI to narzędzie, które pomaga w monitorowaniu aplikacji sparkowych. Jego niewątpliwą zaletą jest to, że zbudowane jest stricte "pod sparka" a konkretnie jego architekturę. Prześledzimy tutaj joby, stage, sprawdzimy executory itd.

Zapraszam do krótkiej wędrówki po Spark UI!

Podstawy

Spark UI jest dostępny jedynie wtedy, gdy mamy włączony klaster sparka. Często sprowadza się to do funkcjonowania aplikacji sparkowej. Jest to niewątpliwy minus samej koncepcji. Został jednak "załatany" stworzeniem Spark History Server, który z grubsza jest tym samym co Spark UI. Jednak . . .

Ta zawartość jest przeznaczona tylko dla uczestników opłacających abonament. Wejdź w ikonę swojego użytkownika w prawym górnym rogu, a następnie "Platności i Konto".