ПФ
Nikolay
Это место на диски или в памяти ?
на диске, конечно
Size: a a a
2020 June 16
ПФ
хотя в памяти тоже потенциально — cache это же MEMORY_AND_DISK
GP
сатанисты любят персистить (неважно где) а потом кластер умирает изза того что они зачемто все заперсистили
ПФ
сатанисты любят персистить (неважно где) а потом кластер умирает изза того что они зачемто все заперсистили
Ну они просто анперсист забывают делать
N
Умирает из за чего?
GP
Ну они просто анперсист забывают делать
ну не в анперсисте дело)
GP
Nikolay
Умирает из за чего?
оом или дисковые или по памяти
GP
персист увеличивает потребление памяти
ПФ
А, они в смысле вообще всё персистят?
GP
А, они в смысле вообще всё персистят?
ну да; классика ж
N
По oom он не должен умирать
GP
бездумный персист как панацея для ускорения операций
GP
Nikolay
По oom он не должен умирать
ну просто не выполняются стейджи нет памяти для послед шагов
N
Он вытеснять память будет
GP
N
Это память storage. Cache в памяти который вытесняется ,если новый нужен
GP
))) ты не попадался никогда в ловушку персиста?)
GP
я честно говоря давно со всем этим сталкивался так что не смгу подвердить это ничем
могу посоветовать проверить как персист отлично на состояние кластера влияет
могу посоветовать проверить как персист отлично на состояние кластера влияет
ПФ
Что круто в
withCached — можно записать в два места, не захламляя код :)N
давайте разберемся. мои утверждения - с памятью проблем точно не будет, если не сделать unpersist.