0
Каков максимальный предел кеша в искре. Сколько данных он может держать одновременно?Каков предел памяти кэша в искровом режиме по умолчанию?
A
ответ
0
Его Фактически полностью зависит от памяти исполнителя. Spark возьмет столько же памяти, сколько большая часть RDD, а остальная часть будет загружаться и пересчитываться «на лету» каждый раз, когда они понадобятся. Он полностью настраивается, и вы можете его проверить. here
0
См. this. По умолчанию это 0.6 x (JVM heap space - 300MB).