самостоятельного режимApache Spark: как планирование уровня приложений выполняется в искровом автономном режиме?
Существует не так много информации на «уровень приложений Планирования» т.е. как несколько приложений планируются в режиме искровых автономного. Ссылка только на эту ссылку http://spark.apache.org/docs/latest/job-scheduling.html. Единственное, что я смог найти, это его планировщик FIFO. Как я понимаю, автономное планирование также может выполняться в статическом или динамическом режиме. Но я не мог найти информацию о динамическом режиме. Может ли кто-нибудь объяснить расписание приложений в искровом автономном режиме?
вы можете настроить # ядра, оперативную память на одного исполнителя, что угодно на уровне SparkSession. SparkSession = искровое приложение. Это динамическая конфигурация –