Globalna Grupa ABD
Globalna Grupa jest jak rynek, na którym możemy się wszyscy spotkać. To tutaj możemy podzielić się... View more
Organizer:
- Organized by
-
-
Seria warsztatowa live z Apache Spark
-
Seria warsztatowa live z Apache Spark
Cześć! Aktualnie jestem w trakcie przygotowywania nowego kursu ze Sparka. To będzie Spark dla zaawansowanych, który będzie kierowany dla osób, które znają już podstawy i chcą zrozumieć jak to działa “głębiej”.
Pomyślałem, że w ramach szeroko pojętych przygotowań, chciałbym zrobić serię kilku live’ów – może 2, 3 może 4. To byłyby live’y warsztatowe, gdzie tłumaczyłbym wybrane aspekty – np. jak uruchomić na serwerze, albo jak odczytywać Query Plan, czy zarządzać zasobami.
Jak zwykle, całość zajmie ok godzinkę, w godzinach wieczornych. Chcę to zrobić w formie warsztatowej, czyli przygotujecie swoje środowisko i będziecie cisnąć razem ze mną:-).
Jestem ciekawy, czy są tutaj chętni na takie zabawy? Sądzę, że możemy wejść mocno w szczegóły sparka, czego zwykle się nie robi “w otwartym” świecie.
Dajcie znać, czy takie coś będzie dla was interesujące:-)
-
10 Replies
-
148
Punkty
Świetny pomysł, ja w to wchodzę;)
-
273
Punkty
Fajny pomysł, też byłby za
-
125
Punkty
Czekam z niecierpliwością 😉
-
442
Punkty
Cieszę się, że wstępny odzew jest;-). Myślę, że nawet te spotkania nie będą długie, ale zanurzymy się w kwestie, które zawsze byłī dla mnie trudne, a które warto po prostu obgadać i przećwiczyć.
Pasuje wam przyszły tydzień któryś dzień? Np. środa lub czwartek.
I myślę jeszcze nad pierwszym tematem. Poniżej kilka które sobie wypisałem, a które na pewno znajdą się w kursie:
- Uruchamianie sparka na klastrze
- Caching w sparku
- Query Plan – jak spark wykonuje i optymalizuje obliczenia?
- Zasoby w sparku: architektura, pamięć executora, partycjonowanie.
Możecie się wypowiedzieć, które są dla was najciekawsze:-)
-
This reply was modified 1 week, 2 days ago by Marek.
-
148
Punkty
Myślę, że warto zacząć od początku, czyli odpalenia Sparka na klastrze. Przed każdym spotkaniem warto ustalić co mamy przygotować po swojej stronie, tak żeby wejść na pełnej na spotkanie. Jak starczy czasu można przejść do innego tematu.
Aaaa.. Bo zapomnę, Kurs będzie prowadzony w Scala czy pySpark?
-
This reply was modified 1 week, 1 day ago by Stanisław Szymański.
-
442
Punkty
W Scali, ale znakomita większość rzeczy jest tak podobnych, że możesz robić w pySparku;-)
-
148
Punkty
Nie jest mi to obce, damy radę ;).
-
-
This reply was modified 1 week, 1 day ago by
-
68
Punkty
Również z chęcią wezmę udział, każdy z zaproponowanych tematow wydaje mi sie ciekawy
-
This reply was modified 1 week, 1 day ago by Jakub Sokołowski.
-
This reply was modified 1 week, 1 day ago by
-
68
Punkty
@mczuma czy temat przetwarzania strumieni danych w sparku jest tematem do ogarnięcia w ramach warsztatu czy to raczej za duży temat?
-
442
Punkty
Hej Kuba! Streaming to osobna, ogromna działka. Można by poruszyć w ramach takiego spotkania coś odstawowego. Niemniej to potem może, po zakończeniu tych live’ów. Następny kurs w przygotowaniu będzie właśnie o sparku strumieniowym;-)
-
Zaloguj się aby odpowiedzieć