Co zrobi iskra, jeśli nie mam wystarczającej ilości pamięci?
Jestem nowym użytkownikiem Sparka i odkryłem, że dokumentacja mówi, że Spark załaduje dane do pamięci, aby przyspieszyć algorytmy iteracji.
Ale co, jeśli mam plik dziennika o pojemności 10 GB i tylko 2 GB pamięci? Czy Spark jak zwykle załaduje plik dziennika do pamięci?