Zajrzałem dziś z ciekawości na ogłoszenia pracy w Anthropic. I chyba zrobię o tym jakiś większy materiał, ale chciałem się z wami podzielić jak wygląda praca przy żyle złota.

W skrócie:

• Zarobki są kosmiczne. 320-405 tysięcy $$$ (a nawet więcej). Oznacza to, że ugrywając „podłogę”, będziecie zarabiać tam ~100 000 zł miesięcznie. Da się…

Czytaj więcej

Emaile to stary dobry sposób na to, aby skutecznie zamknąć sobie drzwi do wejścia na wybitny poziom skupienia. Czas na 5tą lekcję „nierozpraszalnych”.

Emaile mają inną charakterystykę niż smartfony czy media społecznościowe:

• Nie są tak wyniszczające
• Mogą stwarzać przekonanie, że ciągle „pracujemy” – a przynajmniej jesteśmy…

Czytaj więcej

Pierwszy materiał typu „lab” opublikowany w naszej bazie wiedzy!

Przećwiczysz dzięki niemu case, w którym porównujemy jak Spark radzi sobie z tym samym zestawem danych przy ładowaniu z 1, 10, 50, 100 i 1000 plików.

Od razu powiem: wnioski nie są oczywiste. Ale od prostych wniosków DUŻO ważniejszy jest proces. Liczymy czasy, sprawdzamy Spark…

Czytaj więcej

Jestem w trakcie pisania nowego materiału do bazy wiedzy – sprawdzam w nim czy liczba plików ma znaczenie dla Sparka. Oczywiście traktujemy to jako punkt wyjścia do pogrzebania i eksperymentowania;-). Będzie o partycjach, będzie Spark UI i pomiary czasowe.

I napotkałem ciekawy problem: wybór akcji, która rozpoczyna obliczanie…

Czytaj więcej

Smartfon to podstawowy dystraktor, który potrafi zrujnować dzień pracy czy blok nauki.

Po przerobieniu poprzednich lekcji z naszej serii, masz już prawdopodobnie całkiem sporą wiedzę o sobie oraz głębszą świadomość skąd naprawdę przychodzą rozproszenia. Wciąż jednak potrzeba konkretnego warsztatu radzenia sobie z bodźcami zewnętrznymi,…

Czytaj więcej

[EDIT] Aktualizacje zakończone – przynajmniej te główne;-).

Wiem, że są wśród nas Ci, którzy lubią pogrzebać trochę po nocy. Liczę, że dziś wyjątkowo odpoczniecie, bowiem zaczynamy aktualizację najważniejszego modułu Akademii, który jest jej „szkieletem”. Od teraz przez najbliższe kilka godzin mogą wystąpić problemy z korzystaniem z…

Czytaj więcej

Zaktualizowałem „Fundament Sparka”!

Zmiana jest niewielka, ale wierzę że wielu z kursantów ułatwi życie.

Otóż: cały kurs jest w Scali – natywnym języku Sparka. Jednak wiele osób przechodzi to z pythonem. Nie jest to problemem, ponieważ składania jest bardzo podobna. Wierzę jednak, że pomoc krok po kroku w ustawieniu pierwszego działającego…

Czytaj więcej

Gdybyś stanął/ła przed problemem ukrawania poufnych danych w Databricks. To zebrałem kilka przemyśleń jak można podejść do tematu. Jest teraz dużo przepisów i klienci kładą szczególną uwagę na ochronę danych PII. Jeśli masz jakieś pytania czy komentarze to wal jak dym – odpowiem jak tajniak z CIA 🕵️‍♀️

Może się tak zdarzyć, że będziesz…

Czytaj więcej

Wracamy do serii #nierozpraszalni, którą rozpocząłem dawno temu;-). Dziś 3 lekcja, która może być objawieniem dla wielu z nas – dla mnie była.

Zwykle, gdy chcemy być skupieni i przychodzi moment pokusy, spinamy się i napinamy, byle tylko nie sięgnąć po telefon, czy nie kliknąć kolejnego filmu na YT.

Nir Eyal zaleca kompletnie inne podejście.…

Czytaj więcej

Kiedy AI zaczynało być popularne testowałem wiele modeli. Najczęściej wklejałem ten sam prompt do kilku modeli i porównywałem wyniki. I muszę przyznać że była to fajna zabawa chodź czasochłonna. Odpowiedzi były bardzo różnie, niektóre podobały mie się bardziej inne mniej. Dużo zależało o co pytam i jakie zadania daje, wydaje mi się, że jakość…

Czytaj więcej

Wiem, że korzystacie z różnych modeli. Niektórzy w ogóle nie korzystają z AI, a inni jeszcze korzystają jedynie z chatbotów.

Chciałem podzielić się z wami moimi doświadczeniami, jak można zbudować swój osobisty „zestaw AI’owy” tak, żeby był prosty i tani – i zwiększył możliwości twórcze wielokrotnie.

Na wstępie dwa…

Czytaj więcej

Cześć
Jeśli szukasz oszczędności w Databricks i twój klient patrzy na koszty, to może znajdziesz w tym wpisie coś dla siebie.

https://akademia-bigdata.pl/docs/koszty-databricks/

Cześć

Koleżanka szuka inżyniera danych z Databricks. Czy jest ktoś zainteresowany?

https://bitpeak.com/career/senior-data-engineer-2/

Hejo,
Jeśli ktoś miał okazję przechodzić nasz kurs „Fundament Azure Dla Inżynierów Danych”, to zapewne pamięta, że zwieńczeniem tego kursu było poeksperymentowanie z infrą Databricksową. Wspomniałem wtedy, że właściwie cały kurs był ułożony tak, żeby można było omawiać zagadnienia ostatniego odcinka na znanych Wam już konceptach. Gdybyście…

Czytaj więcej

Tak wyglądało moje pierwsze środowisko programistyczne.

Pierwsze nocki zarwane przy programowaniu: gimnazjum. To był pascal i Dev Pascal jako „środowisko programistyczne”, a tak naprawdę nieco bardziej rozbudowany notatnik :D.

Są tu weterani którzy mają podobne doświadczenia? Z czym zaczynaliście w IT? 😀

Moi drodzy, w tym tygodniu nadeszła wielka chwila – oddajemy wam do użytku Szlaki. Nowe miejsce w Akademii, które pozwoli wam skupić się na pracy i drastycznie pomoże w dojściu do celu.

Szlaki to coś więcej niż kurs – to cały, kompleksowy proces który musieliście wcześniej przejść… przygotowany od A do Z.

Nigdy więcej frustracji przez…

Czytaj więcej

Cześć, chciałam wam pokazać mój ostatni projekt.

Długo szukałam datasetu, który nie byłby idealnie wyczyszczonym plikiem CSV, na którym wszystko „po prostu działa”. Chciałam czegoś, co symuluje prawdziwy ból inżyniera danych: duplikaty, niespójności w płatnościach i rozbieżności między systemami.

Zamiast szukać idealnego zbioru, zbudowałam…

Czytaj więcej

github.com

GitHub - klaudia-q/PetCareAnalitycs: Dirty data by design. A pet-care SaaS dataset generator with built-in anomalies- duplicate payments, price discrepancies, cancelled orders; modeled with DuckDB + dbt for analytics engineering practice

Dirty data by design. A pet-care SaaS dataset generator with built-in anomalies- duplicate payments, price discrepancies, cancelled orders; modeled with DuckDB + dbt for analytics engineering pract...

Jakiś czas temu mieliśmy niewątpliwą gratkę w postaci serii postów, które przygotowała dla nas @asmyk. Tłumaczyła tam wnikliwie jak podchodzić do budowania swojego CV. Krok po kroku rozkładała na czynniki pierwsze to, co należy – i JAK należy – zapisać, aby dać się zauważyć.

Dzisiaj zebrałem wszystkie te posty do kupy – znajdziecie je w…

Czytaj więcej

Yo folks,
Jeśli ktoś już opanował kurs Krzyśka i chce podciągnąć swoje skille w Databricks i być może dostać przy okazji prace to istnieje taka możliwość w SoftServe Academy. Ilość miejsc jest ograniczona (10 osób) + wstępna selekcja (test):

https://career.softserveinc.com/en-us/technology/course/databricks-academy

ETL to bardzo pojemna koncepcja. Ale jeśli ktoś jej jeszcze nie zna, to od tego warto ZACZĄĆ myślenie o architekturze systemu obsługi danych.

A to dlatego, że nadaje ona pewne ramy myślowe – w jaki sposób uporządkować przepływ danych, jak to zrobić i dlaczego.

Właśnie na Bazie Wiedzy ABD wylądował mój materiał o ETL. Jest dość niedługi, ale…

Czytaj więcej

Cześć,

Zapraszam do sprawdzenia nowego artykułu w ramach Bazy Wiedzy – opisuję Wam Schemat gwiazdy, z którym prawdopodobnie spotkacie się modelując dane i serwując dane dla Biznesu. Np. przy użyciu modeli semantycznych Power BI.

Bo pamiętajcie, Power BI to nie tylko narzędzie do tworzenia wizualizacji 😉

Smacznego! 🙂

Hej ho! Z dużą dozą przyjemności i odrobiną wstydu chciałem poinformować, że naprawiony został błąd, przez który nie mogliście publikować postów (dzięki @dszczesniak za zwrócenie uwagi).

Korzystając z okazji zachęcam do swobodnego dzielenia się myślami. Pamiętajcie – to nie otwarte media społecznościowe. To bezpieczna przestrzeń pozbawiona…

Czytaj więcej

Jeśli nie mogliście być z nami w środę, nic straconego. Od teraz możecie obejrzeć cały live Krzyska, w którym na żywo pokazuje jak działa DAB w Databricks!

100% praktyki, żywe mięso. Wideo dostępne tylko na Akademii Big Data. Oczywiście znajdziecie je w zakładce „Nagrania Spotkań”.

Chcesz robić deployment kodu do Databricks?

Declarative Automation Bundles (Databricks Asset Bundles) od zera do bohatera

Zapraszam cię na webinaria Akademii Big Data, gdzie pokaże jak pracować z Databricks Asset Bundles.

Pierwsze kroki z Databricks Asset Bundles, => projekt od zera do produkcji.

• jak zacząć
• jak konfigurować
• jak…

Czytaj więcej

Czołem moi drodzy! jak pewnie niektórzy zauważyli, w ostatnich dniach pojawiło się kilka zmian w interfejsie Akademii. Mają one pomóc wam w wyciśnięciu z Akademii tego co wartościowe, by stać się jeszcze lepszymi inżynierami danych!

1. Początek Podróży – każdy z nas na start dostaje 6 kroków, które są jak wyrzutnia. Pozwolą poznać platformę i…

Czytaj więcej

Hej wam! Zapraszamy na nagranie z ostatniego spotkania. Krzysiek uczył nas jak żeglować danymi na Azurowej chmurze;-). Znajdziecie je oczywiście w górnym menu w „Nagrania Spotkań”.

UWAGA! Są dostępne także zasoby – można je znaleźć na Globalnej Grupie w sekcji „Dokumenty”.

Udanego oglądania! I dobrego weekendu;-)

Zasoby do live "Ładowanie danych do bronze przy użyciu ADF i Databricks" z 19.03.2026 (https://akademia-bigdata.pl/nagrania/ladowanie-danych-do-bronze-przy-uzyciu-adf-i-databricks/).

Hejo,

Potrzebujemy dobrych data engineerów (więcej niż jeden wakat, Mid level też jest opcja), ogłoszenie poniżej:
https://careers.softwaremind.com/jobs/azure-senior-data-engineer/

Jeśli Was to interesuje albo macie kogoś, to dawajcie znać, puszczę zgłoszenie jako referral, więc będize szybciej.

Jedna uwaga: nie ma opcji, że „jakoś to będzie”,…

Czytaj więcej

careers.softwaremind.com

Azure Senior Data Engineer job in Kraków / remotely

Looking for Azure Senior Data Engineer position in Kraków / remotely? Apply here and join Software Mind team. Check our benefits and Work 'n Enjoy program for those who like to work & travel.

Już dzisiaj o 20.00 Webinar ADF i Databricks jak można ogarnąć ładowanie danych.

Zapraszamy

https://www.youtube.com/watch?v=KkTOP45urnA

W ostatnich dniach do Akademii dołączyło sporo osób. Już dawno nic (na gruncie zawodowym;-)) nie sprawiło mi większej satysfakcji!

Chciałbym powiedzieć kilka słów na temat samej Akademii – być może pomogą wam lepiej z niej skorzystać:

1. Akademia ma być bezpieczną przestrzenią rozwoju – wiem, że większość z nas to introwertycy. Jednak jeśli tylko…

Czytaj więcej

Hej Wam! Każdego kto chce poznać Databricksy „z pola walki”, zapraszam na mój pierwszy post #notatnikDBX 😀. Dla mnie to forma zapisu tego co i jak. Czasami ogólne przemyślenia, czasami jakiś bardzo mocny wycinek techniczny.

Od razu powiem też, że to nie jest alternatywa dla kursu „Fundament Databricks” Krzyśka. To raczej przegląd moich myśli z…

Czytaj więcej

Jak zostać cenionym inżynierem danych w erze automatyzacji i AI? [Info o spotkaniu w styczniu na dole]

Nir Eyal zauważa:

Naukowcy informują, że uwaga i koncentracja są surowcami niezbędnymi do rozkwitu i kreatywności.

W epoce postępującej automatyzacji najbardziej rozchwytywani specjaliści to Ci, którzy potrafią kreatywnie podchodzić do problemów,…

Czytaj więcej

Moi drodzy! Wybaczcie najmocniej, że jeszcze nie ma grupy kursowej Azurowej 😱

Obiecuję, że najpóźniej na początku przyszłego tygodnia każdy, kto wykupił dostęp, dostanie zaproszenie do grupy;-). Być może nawet już w weekend. Okazuje się, że przeprowadzka to baardzo pochłaniająca sprawa 😅 ale od niedzieli powinienem móc złapać choć odrobinę…

Czytaj więcej

Już jest! 🤩 A każdy uczestnik Akademii Big Data może dostać hardcorowo użyteczny materiał za cenę pizzy 🍕.

Moi drodzy. Nadszedł czas na ostatnią premierę na Akademii w tym roku.

Tym razem wchodzimy w świat Azure. A zabiera nas tam sam Bartek Dylik!

Nawet w 2 tygodnie możecie poznać Azura na poziomie, który wyniesie waszą wartość do innej orbity.…

Czytaj więcej

Tym razem zadanie koderskie.

Dzień dobry w nowym tygodniu – i to otwierajacym ostatni miesiąc roku!

To chyba ostatni dzwonek, żeby przycisnąć i 31.12 powiedzieć z dumą „jestem w innym miejscu niż rok temu”.

Małą cegiełką, aby coś zmienić, będzie zadanie tygodnia. Dataset jest niewielki, ale poostawia ogrom miejsca do inspiracji – można…

Czytaj więcej

Cześć,

W ramach „Dane Są Wszędzie” przygotowałem Adwentowe Wyzwanie w temacie SQL, PBI i Hurtowni Danych 🙂

To projekt edukacyjny w luźnym, świątecznym klimacie – darmowy i otwarty dla każdego.

Od 1 do 19 grudnia przygotowałem coś specjalnego – codziennie dostaniesz jedno krótkie zadanie, quiz lub ciekawostkę, a wszystko opiera się na danych z…

Czytaj więcej

Nowe zadanie tygodnia!

Witam w nowym tygodniu wszystkich którzy dzielnie przekopują się przez wiedzę i trudności związane z danymi;-).

Aby pomóc odświeżyć wiedzę z dziedziny storages, zapraszam do nowego zadania tygodnia.

Sam quiz nie jest ciężki, ale odpowiedzi na pytania bywają podchwytliwe.

Jak zwykle – zachęcam aby przy tej okazji zgłębić…

Czytaj więcej