Globalna Grupa ABD
Globalna Grupa jest jak rynek, na którym możemy się wszyscy spotkać. To tutaj możemy podzielić się... View more
Organizer:
- Organized by
-
-
Group Feed
-
Ile zarabia Data Engineer w Anthropic?
Zajrzałem dziś z ciekawości na ogłoszenia pracy w Anthropic. I chyba zrobię o tym jakiś większy materiał, ale chciałem się z wami podzielić jak wygląda praca przy żyle złota.
W skrócie:
- Zarobki są kosmiczne. 320-405 tysięcy $$$ (a nawet więcej). Oznacza to, że ugrywając „podłogę”, będziecie zarabiać tam ~100 000 zł miesięcznie. Da się…
-
Czy liczba plików ma w Sparku znaczenie?
Pierwszy materiał typu „lab” opublikowany w naszej bazie wiedzy!
Przećwiczysz dzięki niemu case, w którym porównujemy jak Spark radzi sobie z tym samym zestawem danych przy ładowaniu z 1, 10, 50, 100 i 1000 plików.
Od razu powiem: wnioski nie są oczywiste. Ale od prostych wniosków DUŻO ważniejszy jest proces. Liczymy czasy, sprawdzamy Spark…
akademia-bigdata.pl
Zaloguj się ‹ Akademia Big Data Growth — WordPress
Zaloguj się ‹ Akademia Big Data Growth — WordPress
-
Jaką akcję wybrać w Sparku, gdy chcemy testować i eksperymentować?
Jestem w trakcie pisania nowego materiału do bazy wiedzy – sprawdzam w nim czy liczba plików ma znaczenie dla Sparka. Oczywiście traktujemy to jako punkt wyjścia do pogrzebania i eksperymentowania;-). Będzie o partycjach, będzie Spark UI i pomiary czasowe.
I napotkałem ciekawy problem: wybór akcji, która rozpoczyna obliczanie…
-
Aktualizacja Akademii - okno utrzymaniowe
[EDIT] Aktualizacje zakończone – przynajmniej te główne;-).
Wiem, że są wśród nas Ci, którzy lubią pogrzebać trochę po nocy. Liczę, że dziś wyjątkowo odpoczniecie, bowiem zaczynamy aktualizację najważniejszego modułu Akademii, który jest jej „szkieletem”. Od teraz przez najbliższe kilka godzin mogą wystąpić problemy z korzystaniem z…
-
Aktualizacja Fundamentu Sparka
Zaktualizowałem „Fundament Sparka”!
Zmiana jest niewielka, ale wierzę że wielu z kursantów ułatwi życie.
Otóż: cały kurs jest w Scali – natywnym języku Sparka. Jednak wiele osób przechodzi to z pythonem. Nie jest to problemem, ponieważ składania jest bardzo podobna. Wierzę jednak, że pomoc krok po kroku w ustawieniu pierwszego działającego…
-
Maskowanie danych
Gdybyś stanął/ła przed problemem ukrawania poufnych danych w Databricks. To zebrałem kilka przemyśleń jak można podejść do tematu. Jest teraz dużo przepisów i klienci kładą szczególną uwagę na ochronę danych PII. Jeśli masz jakieś pytania czy komentarze to wal jak dym – odpowiem jak tajniak z CIA 🕵️♀️
Może się tak zdarzyć, że będziesz…
akademia-bigdata.pl
Zaloguj się ‹ Akademia Big Data Growth — WordPress
Zaloguj się ‹ Akademia Big Data Growth — WordPress
-
Moje przygody z AI
Kiedy AI zaczynało być popularne testowałem wiele modeli. Najczęściej wklejałem ten sam prompt do kilku modeli i porównywałem wyniki. I muszę przyznać że była to fajna zabawa chodź czasochłonna. Odpowiedzi były bardzo różnie, niektóre podobały mie się bardziej inne mniej. Dużo zależało o co pytam i jakie zadania daje, wydaje mi się, że jakość…
-
Tani, prosty i dobry zestaw do pracy z AI podczas kodowania (i nie tylko)
Wiem, że korzystacie z różnych modeli. Niektórzy w ogóle nie korzystają z AI, a inni jeszcze korzystają jedynie z chatbotów.
Chciałem podzielić się z wami moimi doświadczeniami, jak można zbudować swój osobisty „zestaw AI’owy” tak, żeby był prosty i tani – i zwiększył możliwości twórcze wielokrotnie.
Na wstępie dwa…
-
Wykorzystuję dosyć podobny setup, czyli Chat GPT do rozmawiania o projekcie i Codex do bezpośredniej pracy z kodem. Równolegle używam jeszcze Claude Chat/Claude Code. W zależności, który model jest na fali, wtedy bardziej korzystam z Codex lub Claude Code. Oczywiście można podpiąć te dwie subskrypcje pod jeden harness np. Pi/Oh-my-Pi, ale na…Czytaj więcej
1- View 1 reply
-
-
Koszty Databricks
Cześć
Jeśli szukasz oszczędności w Databricks i twój klient patrzy na koszty, to może znajdziesz w tym wpisie coś dla siebie. -
Klaudia Kuszczak started the discussion Projekt NBP w Fabric migracja do Databricks in the forum Globalna Grupa ABD 2 months temu
Projekt NBP w Fabric migracja do Databricks
Cześć! Niedawno obroniłam pracę inżynierską „Projekt i implementacja systemu przetwarzania danych opartego o architekturę Lakehouse w Microsoft Fabric” i chcę podzielić się z wami projektem, który był jej największym elementem. Przy okazji dziękuję Markowi Czumie za solidną dawkę wiedzy o Sparku. Przydała się i od strony teorii i praktyki.
…
Wojciech Jarosz and Ignacy Kaźmierczak - Load More
