@dszczesniak jasne, dzięki za odpowiedź. Tutaj chodziło mi o podejście które opisałeś w pkt. b). Czyli jeżeli w tabeli 'Sales’ schodzimy do poziomu product_ID, to będziemy mieli wiele wierszy o tym samym „order_id”, każdy odpowiadający za osobny produkt_ID. Ma to sens! 🙂

Pytanie dot schematu gwiazdy, czy jest jakiś standard/dobra praktyka jak rozwiązać w tym modelu relację wiele […]

@mczuma Nie wiem co na to Dominik, ale w między czasie mogę powiedzieć jak to wygląda u mnie, zobaczymy czy jest zgodnie ze sztuką 🙂
U siebie w firmie pracuję na tzw. Bus Matrix (macierz procesów biznesowych) i to tam definiujemy co mierzymy/śledzimy-fakty i jak to opisujemy – wymiary. W naszym przypadku kluczowe miary biznesu to np.:…Czytaj więcej

Pytanie dot schematu gwiazdy, czy jest jakiś standard/dobra praktyka jak rozwiązać w tym modelu relację wiele […]

Hej,

@dszczesniak Dzięki za czwartkowy wykład😊

Pytanie dot schematu gwiazdy, czy jest jakiś standard/dobra praktyka jak rozwiązać w tym modelu relację wiele do wielu pomiędzy fact a dimension table?

Na przykładzie z wykładu, mamy Fact table dot. Sprzedaży, składa się z zamówienia, kwoty zamówienia, daty, odbiorcy i produktów. Pytanie jak…

Czytaj więcej

Dzięki za spotkanie, super było się zobaczyć Live!🙂

Tak było wczoraj w Wawie! Fantastyczne spotkanie, m.in. z @michalM i @mgrodek. Widzieliśmy się na imprezie firmy, przy której projektach obaj Panowie pracowali. A […]

Nie tak solidnie jak koledzy wyżej, ale co zdążyłem to naskrobałem 🙂 Pobiera dane i zapisuje na s3 w AWS. Nie ma tylko API do zmiany miasta na współrzędne, więc od razu zaczynam z długiem technicznym 😀

Repo: https://github.com/MichaelTheButter/DecChallenge/tree/main

Czas na zadanie nr 1! Zaczynamy od samego początku czyli… pozyskania surowych danych pogodowych!

Podstawowe polecenie: Napisz aplikację, która pobiera dane z API […]

W tym przypadku, działało to w ten sposób, że testowe dane trzymamy w tych samych tabelach co dane produkcyjne, a kod, który dopiero chcesz sprawdzić, odpalamy przed wejściem na produkcję, korzystając z produkcyjnej infrastruktury. Ciężko to chyba sobie wyobrazić i wytłumaczyć bez pokazania na konkretnym przykładzie :). W tym projekcie…

Czytaj więcej

Zastanawia mnie jak wygląda pisanie testów jednostkowych, integracyjnych itd w big data.

Na jakim etapie pracy z danymi takie testy są możliwe do […]

Według mnie testy można pisać od początkowych etapów . Nie jest to myślę twardy wymóg, wszystko zależy od projektu i czy jest to zasadne. Ale nawet jak w projekcie infrastruktura się dopiero tworzy i nie ma jeszcze przepływu danych, możemy pisać testy jednostkowe weryfikujące metody. Dobrze utrzymane testy, mocno ułatwiają późniejszy…Czytaj więcej

Zastanawia mnie jak wygląda pisanie testów jednostkowych, integracyjnych itd w big data.

Na jakim etapie pracy z danymi takie testy są możliwe do […]