Globalna Grupa ABD
Globalna Grupa jest jak rynek, na którym możemy się wszyscy spotkać. To tutaj możemy podzielić się... View more
Organizer:
- Organized by
-
-
Seria warsztatowa live z Apache Spark
-
Seria warsztatowa live z Apache Spark
Cześć! Aktualnie jestem w trakcie przygotowywania nowego kursu ze Sparka. To będzie Spark dla zaawansowanych, który będzie kierowany dla osób, które znają już podstawy i chcą zrozumieć jak to działa “głębiej”.
Pomyślałem, że w ramach szeroko pojętych przygotowań, chciałbym zrobić serię kilku live’ów – może 2, 3 może 4. To byłyby live’y warsztatowe, gdzie tłumaczyłbym wybrane aspekty – np. jak uruchomić na serwerze, albo jak odczytywać Query Plan, czy zarządzać zasobami.
Jak zwykle, całość zajmie ok godzinkę, w godzinach wieczornych. Chcę to zrobić w formie warsztatowej, czyli przygotujecie swoje środowisko i będziecie cisnąć razem ze mną:-).
Jestem ciekawy, czy są tutaj chętni na takie zabawy? Sądzę, że możemy wejść mocno w szczegóły sparka, czego zwykle się nie robi “w otwartym” świecie.
Dajcie znać, czy takie coś będzie dla was interesujące:-)
-
10 Replies
-
283
Exp
Świetny pomysł, ja w to wchodzę;)
-
495
Exp
Fajny pomysł, też byłby za
-
126
Exp
Czekam z niecierpliwością 😉
-
819
Exp
Cieszę się, że wstępny odzew jest;-). Myślę, że nawet te spotkania nie będą długie, ale zanurzymy się w kwestie, które zawsze byłī dla mnie trudne, a które warto po prostu obgadać i przećwiczyć.
Pasuje wam przyszły tydzień któryś dzień? Np. środa lub czwartek.
I myślę jeszcze nad pierwszym tematem. Poniżej kilka które sobie wypisałem, a które na pewno znajdą się w kursie:
- Uruchamianie sparka na klastrze
- Caching w sparku
- Query Plan – jak spark wykonuje i optymalizuje obliczenia?
- Zasoby w sparku: architektura, pamięć executora, partycjonowanie.
Możecie się wypowiedzieć, które są dla was najciekawsze:-)
-
This reply was modified 3 months, 1 week ago by Marek Czuma.
-
283
Exp
Myślę, że warto zacząć od początku, czyli odpalenia Sparka na klastrze. Przed każdym spotkaniem warto ustalić co mamy przygotować po swojej stronie, tak żeby wejść na pełnej na spotkanie. Jak starczy czasu można przejść do innego tematu.
Aaaa.. Bo zapomnę, Kurs będzie prowadzony w Scala czy pySpark?
-
This reply was modified 3 months, 1 week ago by Stanisław Szymański.
-
819
Exp
W Scali, ale znakomita większość rzeczy jest tak podobnych, że możesz robić w pySparku;-)
-
283
Exp
Nie jest mi to obce, damy radę ;).
-
-
This reply was modified 3 months, 1 week ago by
-
85
Exp
Również z chęcią wezmę udział, każdy z zaproponowanych tematow wydaje mi sie ciekawy
-
This reply was modified 3 months, 1 week ago by Jakub Sokołowski.
-
This reply was modified 3 months, 1 week ago by
-
85
Exp
@mczuma czy temat przetwarzania strumieni danych w sparku jest tematem do ogarnięcia w ramach warsztatu czy to raczej za duży temat?
-
819
Exp
Hej Kuba! Streaming to osobna, ogromna działka. Można by poruszyć w ramach takiego spotkania coś odstawowego. Niemniej to potem może, po zakończeniu tych live’ów. Następny kurs w przygotowaniu będzie właśnie o sparku strumieniowym;-)
-
Zaloguj się aby odpowiedzieć