Apache Spark: jak jest zbudowany? (Architektura)

Z grubsza ogarniesz to w: 2 min


Autor: Marek Czuma

Jak jest zbudowany Apache Spark? W jaki sposób działa w trybie rozproszonym? Jakie są kluczowe komponenty jego architektury? Czym jest driver i executor? Te wszystkie informacje znajdziesz w poniższym materiale. Jeśli więc nie rozumiałeś/aś do tej pory architektury Sparka - teraz na pewno wszystko stanie się dla Ciebie jasne;-).

  1. Ogólna architektura
  2. Driver
  3. Executor
  4. Partycje

Ogólny kształt architektury

Zacznijmy od obrazka. Spójrz na niego przez 30 sekund i postaraj się zapamięta . . .

Ta zawartość jest przeznaczona tylko dla uczestników opłacających abonament. Wejdź w ikonę swojego użytkownika w prawym górnym rogu, a następnie "Platności i Konto".