Od Web Developera Do Data Engineera
Przejście przez ten szlak spowoduje, że z twórcy aplikacji webowych zmienisz się w inżyniera danych, który włada najważniejszymi technologiami na rynku!
Przetwarzanie danych z Apache Spark
Podstawowa budowa Apache Spark
Artykuł
Fundament Apache Spark
Kurs
Narrow i wide transformation w Apache Spark
Artykuł
Strategie partycjonowania w Apache Spark
Artykuł
Spotify: związek między subskrypcją a intensywnością korzystania
Zadanie
Czym jest query plan w Apache Spark?
Artykuł
Warsztat optymalizacji: Predicate pushdown + column pruning w Sparku
Artykuł
Warsztat źródła: Formaty plików w Apache Spark
Artykuł
Optymalizacja analizy wartości giełdowej
Zadanie
Koncepcje, architektury i modele big data
Czym jest ETL - od 0 do bohatera
Artykuł
Architektura Big Data w branży medycznej
Nagranie
Czym jest architektura Master-Slave
Artykuł
Architektura Medallion na bazie Databricks
Nagranie
Podstawy modelowania danych (data modeling)
Nagranie
Czym jest schemat gwiazdy? (data modeling)
Artykuł
Test ze schematu gwiazdy
Zadanie
Chmura - nowoczesna infrastruktura pracy
Databricks: nowoczesny ekosystem inżyniera danych
Rynek: rekrutacja i widoczność na rynku
🎯 Dokąd dojdziesz?
Po tym szlaku zdobędziesz kompletny warsztat inżyniera danych, który pozwoli Ci ruszyć do rozmów rekrutacyjnych, lub prosto do twojego pierwszego projektu big data!
🧭 Sprawdź, czy jesteś gotowy!
Jeśli masz za sobą doświadczenie aplikacji webowych - nie zastanawiaj się dłużej!
Jeśli nie, upewnij się, że umiesz programować (najlepiej python lub scala), znasz podstawy relacyjnych baz danych (i SQL) oraz systemów/sieci/serwerów (Linux, SSH i tego typu frykasy)
👥 Eksperci, których spotkasz na szlaku
Marek Czuma
Ekspert od Sparka
Krzysiek Nojman
Ekspert od Databricks
Bartek Dylik
Ekspert od Azure
Dominik Szcześniak
Ekspert od modelowania danych
💬 Grupa Szlakowa
Gdy wejdziesz na szlak, możesz dołączyć do tej grupy. Znajdziesz tu innych uczestników tego samego szlaku!