Globalna Grupa ABD
Globalna Grupa jest jak rynek, na którym możemy się wszyscy spotkać. To tutaj możemy podzielić się... View more
Organizer:
- Organized by
-
-
Group Feed
-
Rafał Kowalski started the discussion Advent of Code 🎁 in the forum Globalna Grupa ABD 13 hours ago
Cześć 🙂
Dziś pierwszy dzień adwentu – czasu oczekiwania na 🎄 Boże Narodzenie. Z tej okazji w wielu środowiskach technologicznych organizowane są tzw. “Advent of Code” 🎁, czyli codzienne wyzwania programistyczne.Nie ukrywam, że kiedyś brałem udział w takich wyzwaniach, rozwijając i pogłębiając swoją wiedzę z zakresu Pythona 🐍. W tym roku chciałbym…
-
Marek posted an update in the group
Globalna Grupa ABD a day agoMoi drodzy! To ostatnie chwile, żeby zdobyć kursy ze Scali i Sparka za 10% zamiast klasycznych 20%.
Obecnie można zdobyć wiedzę ze Sparka do poziomu juniora za… 42 zł. Czyli tyle ile za pizzę na cienkim:-).
Wiedza ze Scali jest jeszcze bardziej skandaliczna, bo za 15 zł. Bywają chleby, które tyle kosztują 😀
Zachęcam:-).
-
Marek posted an update in the group
Globalna Grupa ABD 2 days agoHahaha, to podobno jestem ja:D. Piąteczkowo – chat GPT narysował mnie w dość specyficznym stylu. Najbardziej urzeka mnie napis który jest z tyłu: “SCALA HARD OR GO HOME”. Chyba sobie wydrukuje taki do gabinetu, gry przeprowadzę się do domu;-).
Z uwag: zdecydowanie za dużo pythona :D. Ciekawi nie też ten mały gościu na stole.
Wrzucajcie co chat…
-
No cóż… xd ciężko się nie zgodzić 😀
1- View 1 reply
-
Wygenerowałem 3 obrazki i wybrałem ten który wg mnie najlepiej pasuje 🙂
-
-
Marek posted an update in the group
Globalna Grupa ABD 3 days agoDzisiaj chciałem opisać wam jak działa Hive – dość specyficzna technologia typu Data Warehouse, którą ogólnie opisywałem wczoraj:-).
Nie przejmujcie się obrazkiem architektury:D. Chciałbym wam opisać samą koncepcję budowy, bo jest ona warta uwagi. Tym bardziej, że niemal do każdego aspektu można zajrzeć w bebechy!
- Dane: Sam Hive nie jest “bazą…
-
Marek posted an update in the group
Globalna Grupa ABD 4 days agoDzisiejsza środowa technologia należy do… Apache Hive! Właśnie prowadzę z Hive szkolenie, niebawem na Akademii pojawi się trochę materiałów w bazie wiedzy w tym zakresie. Zacznijmy więc od środowego posta;-).
Wyobraźcie sobie, że macie na HDFS petabajty danych. Są o dziwo dość dobrze ustrukturyzowane i chcecie je systematycznie analizować.…
-
Marek posted an update in the group
Globalna Grupa ABD 5 days agoWłaśnie wjechał nowy film na YT Akademii BD. Absolutnie dla początkujących:-).
Cel: chciałem dać takie przeglądowe spojrzenie na tworzenie systemów opartych o dane. Pokazać jakie są rodzaje technologii i jacy są główni przedstawiciele.
Tak czy siak – za każdą łapkę w górę będę dozgonnie wdzięczny :D.
Na Globalnej Grupie wrzucam PDF z prezentacją…
-
Film o technologiach BD dla początkujących: https://www.youtube.com/watch?v=vbCjpDtWpTg
1
-
-
Marek posted an update in the group
Globalna Grupa ABD a week agoPiątkowo przedstawiam wam mój klasterek rozwojowy/eksperymentalny 😀
Ustawiłem go już parę lat temu. Składa się z dwóch PCtów które kupiłem na rynku wtórnym, każdy bodajże za 1600 zł czy jakoś tak.
Służy mi głównie do eksperymentowania i nauki. Zarówno dla siebie, jak i na potrzeby ćwiczenia do szkoleń:-).
Każdy z obu kompów ma ~32 GB RAM.…
-
Ja też chętnie się pochwalę swoim klastrem, który aktualnie doprowadza mnie do szału. XD
4 węzły na Ubuntu Server, z czego jeden jest tym zarządzającym a pozostałe to workerzy.
Na klastrze Hadoop, Spark i Kafka. Klastrem zarządzam z innego komputera, głównie za pomocą ansible. Chciałbym nauczyć się na nim systemów rozproszonych, żeby móc później…
2- View 1 reply
-
Skoro się chwalimy, to i ja wrzucę coś od siebie ;-). Swój klaster zacząłem budować po wysłuchami jednego z odcinków podcastu “BigData po Polsku”. Moja konfiguracja to obecnie 2 desktopy poleasingowe Lenovo S20 i S30 na Xenon’ach z 32 i 64GB RAM działające pod kontrolą Ubuntu server w wersji 22.04 LTS. Mam na nich Hadoop’a, Spark’a, Docker’a…
2- View 6 replies
-
-
Marek posted an update in the group
Globalna Grupa ABD a week agoa week ago (edited)
Moi drodzy! Czas na… nowy kanał na YouTube!
Ogromna prośba o subskrypcję i przesłuchanie “zwiastunu” kanału, a wlaściwie platformy.
Czemu kanał Akademii Big Data?
- Chcę, żeby Akademia BD był osobną marką niż RDF – jest najważniejszym projektem!
- Chcę, żeby było miejsce, w którym będzie dużo technicznych filmów.
- Dlatego już więcej nie będzie filmów…
-
A tu wideo – zwiastun: https://www.youtube.com/watch?v=wjhheDIYBSI
3
-
Marek posted an update in the group
Globalna Grupa ABD a week agoa week ago (edited)
Dziś środa, więc poznajemy technologie! Tym razem pójdziemy dalej w kierunku Sparka, ale sparka… strumieniowego (Spark Structured Streaming).
Wyobraź sobie sytuację, w której Twoim zadaniem jest zbudować system, który monitoruje stan powietrza w mieście. Mamy na różnych ulicach rozstawione czujniki smogu, temperatury, ciśnienia,…
-
Marek posted an update in the group
Globalna Grupa ABD a week agoa week ago (edited)
Dobre praktyki tworzenia workflow/data flow.
Chciałbym się z Wami podzielić swoimi przemyśleniami dotyczącymi tego o czym pamiętać kiedy projektujemy budowę naszego systemu do pracy z danymi.
Oto moje przemyślenia i notatki do siebie z przyszłości;-)
- Założenia dotyczące danych na wejściu (input) – kwestia organizacyjna. Moim zdaniem kluczową…
- Load More
