Reply To: Klaster spark + minIO

  • Marek Czuma

    Organizer
    2025-11-05 at 17:05
    3835 Exp

    Nietypowych problemów na własnym klastrze jest multum. Ja pamiętam jak się bawiłem z Ozone – niby następcą HDDFS, ale coś chyba nie wypaliło. Tak czy inaczej, jak coś źle się wyłączyło, klaster nadawał nodom nowe IDki i nie mógł potem sparować ich jakoś po folderach (bo tam były stare). Jedyne rozwiązanie do jakiego dotarłem to zaoranie klastra – przeczyszczenie i ponowne postawienie. Trochę mało produkcyjne 😀

    A Tobie Wojtku bardzo gratuluję! I chociaż taka robota to kupa czasu i wysiłku, to uczy tej branży “od spodu”. Poziom zrozumienia tych technologii potem jest kompletnie inny. Super też, że wykorzystałeś AI do rozwiązania problemu. Chciałbym żebyśmy porozmawiali sobie za jakiś czas na forum Akademii o wykorzystaniu asystentów AI do pracy w inżynierii danych:-) Może jakieś spotkanko? Może grudzień?