@kasper Tu od razu przypomina mi się prawo Conwaya, które mówi że integracja pomiędzy systemami jest tak dobra jak komunikacja pomiędzy zespołami które je robią. To też się tyczy projektów, jak nie ma komunikacji (zrozumienia) to nici z integracji. I znowu podstawy są najważniejsze, zamiast magicznych diagramów wystarczy ołówek byle by ludzie…Czytaj więcej

Jak zabrać się do rozrysowywania architektury projektu?

Właśnie rozpocząłem wewnętrzny projekt Akademii – Blackbox Project;-). To „czarna skrzynka […]

Ja mam pytanko jak logi będą spływały do storage – będzie pusz czy pull ?

Jak zabrać się do rozrysowywania architektury projektu?

Właśnie rozpocząłem wewnętrzny projekt Akademii – Blackbox Project;-). To „czarna skrzynka […]

Właśnie dodałem artykuł do bazy wiedzy w jaki sposób podejść do standaryzacji kontroli jakości przy użyciu Databricks DQX. Jeśli nie korzystałeś/łaś z DQX to warto bo niedługo będzie dostępny w Databricks i będzie można sprawdzić każdy wiersz czy spełnia twoje wymagania czy nie.

Czytaj więcej

Bardzo ładne i chwytające za serce określenie „cykl śmierci”, moje obserwacje są podobne. Coraz cześciej widzę młodych inzynierów… znam kogoś kto jest w technikum i już kod piszą za niego asystenci. Zapytałem czy sprawdza i zatwierdza decyzję, a on na to, że nie asystenci lecą na auto i zatwierdzanie jest na auto. Więc nie ma nikogo kto by…

Czytaj więcej

AI prowadzi do ciekawego, choć nieco przerażającego zjawiska:

1. Kod możemy tworzyć, nie pisząc go – bo AI zrobi to często lepiej i szybciej (a godzina […]

Gdybyś stanął/ła przed problemem ukrawania poufnych danych w Databricks. To zebrałem kilka przemyśleń jak można podejść do tematu. Jest teraz dużo przepisów i klienci kładą szczególną uwagę na ochronę danych PII. Jeśli masz jakieś pytania czy komentarze to wal jak dym – odpowiem jak tajniak z CIA 🕵️‍♀️

Może się tak zdarzyć, że będziesz…

Czytaj więcej

Kiedy AI zaczynało być popularne testowałem wiele modeli. Najczęściej wklejałem ten sam prompt do kilku modeli i porównywałem wyniki. I muszę przyznać że była to fajna zabawa chodź czasochłonna. Odpowiedzi były bardzo różnie, niektóre podobały mie się bardziej inne mniej. Dużo zależało o co pytam i jakie zadania daje, wydaje mi się, że jakość…

Czytaj więcej

Cześć
Jeśli szukasz oszczędności w Databricks i twój klient patrzy na koszty, to może znajdziesz w tym wpisie coś dla siebie.

https://akademia-bigdata.pl/docs/koszty-databricks/

Cześć

Koleżanka szuka inżyniera danych z Databricks. Czy jest ktoś zainteresowany?

https://bitpeak.com/career/senior-data-engineer-2/

@mczuma lekko nie było bez intellisense palce bolały 😂

Tak wyglądało moje pierwsze środowisko programistyczne.

Pierwsze nocki zarwane przy programowaniu: gimnazjum. To był pascal i Dev Pascal jako […]

Ja zaczynałem od VBA i automatyzacji Excela baza i system w jednej aplikacji. Nic więcej nie trzeba

Tak wyglądało moje pierwsze środowisko programistyczne.

Pierwsze nocki zarwane przy programowaniu: gimnazjum. To był pascal i Dev Pascal jako […]

Klaudia
Jestem pod wrażeniem, parę tygodni temu potrzebowałem danych na demo dla klienta, i się namęczyłem z AI żeby zrobić coś sensownego. Świetny pomysł z tym gneratorem, takie narzędzie można wykorzystać w wielu miejscach i do tego otestowane. Świetna robota.

Cześć, chciałam wam pokazać mój ostatni projekt.

Długo szukałam datasetu, który nie byłby idealnie wyczyszczonym plikiem CSV, na którym wszystko […]

Chcesz robić deployment kodu do Databricks?

Declarative Automation Bundles (Databricks Asset Bundles) od zera do bohatera

Zapraszam cię na webinaria Akademii Big Data, gdzie pokaże jak pracować z Databricks Asset Bundles.

Pierwsze kroki z Databricks Asset Bundles, => projekt od zera do produkcji.

• jak zacząć
• jak konfigurować
• jak…

Czytaj więcej

Już dzisiaj o 20.00 Webinar ADF i Databricks jak można ogarnąć ładowanie danych.

Zapraszamy

https://www.youtube.com/watch?v=KkTOP45urnA

@datadwarf Gratujące Wojtku oby tak dalej niech twój GitHub bęka w szwach.😁

Cześć,

W ramach „Dane Są Wszędzie” przygotowałem Adwentowe Wyzwanie w temacie SQL, PBI i Hurtowni Danych 🙂

To projekt edukacyjny w luźnym, […]

A czy bedzie mozna zobaczyć wyniki ?

Hej!
Chciałem zaprosić wszystkich do Wielkiej Ankiety Branzy Data robionej przez Kasię Dyl (crappydata), którą możecię kojarzyć z jednego z […]

Hej

Lekki artykuł do poczytania przez weekend.

Nobody Gets Fired for Picking JSON, but Maybe They Should?

mcyoung.xyz

Nobody Gets Fired for Picking JSON, but Maybe They Should? · mcyoung

Nobody Gets Fired for Picking JSON, but Maybe They Should? · mcyoung

Witamy serdecznie, niech klawiatura lekką Ci będzie, co dla nas dobre będzie. 😁

Cześć,

Miło mi podzielić się z Wami informacją, że dołączam do Akademii w roli Eksperta- Partnera!

Kilka słów o mnie:

W branży danych od 8 lat, […]

Świetny tip

🎓 Zgarnij 50% zniżki na egzamin Databricks

Piona,

Właśnie obczaiłem, że Databricks z początkiem kwietnia odpalił Virtual Learning Festival, w ramach […]

Witam
Chciałem serdecznie zaprosić na imprezkę, taką oczywiście bezalkoholową. Imprezka live-wirtualna.
Temat przewodni „Świat Databricks dla Inżyniera Danych”
A kiedy to zależy od was może
Wtorek 22.04.2025 lub Środa 23.04.2025
19.00
20.00
21.00

@staszym Poruszę ten temat na live, żeby wszystko wyjaśnić, tak na teraz to podkreślę, że podstawy są najważniejsze. Dzisiejszy Lakehouse stoi na podstawie Warehouse, a podstawy procesu ETL nie zmieniły się od wielu lat…. są nowe narzędzia, ale principia są takie same. To może brzmieć banalnie, ale najlepiej zacząć od małego projektu. cd..

Witam
Serdeczne i gorące pozdrowienia dla wszystkich grupowiczów ze słonecznego Krakowa😎
Chciałem się przywitać i pozdrowić, oraz zapytać co […]

Witam
Serdeczne i gorące pozdrowienia dla wszystkich grupowiczów ze słonecznego Krakowa😎
Chciałem się przywitać i pozdrowić, oraz zapytać co słychać.
Planujemy z Markiem live show o Databricks…. i to zapewne będzie pierwszy odcinek…jeśli chcesz zobaczyć coś ciekawszego od Netflixa to obserwuj ten kanał.📽

Taki live to może być przeżycie, jak w kinie. nie wiem czy świat @staszym jest na to gotowy 😁

Architektura Medallion. Co to za zwierz? Warto się z nią zapoznać, bo jest ona ściśle związana z zyskującym na znaczeniu ekosystemem Databricks.

O co […]