Какие параметры конфигурации YARN перечитываются в каждом приложении?

Question

У меня есть одна работа, которая намного больше, чем другие 50 или около того, которые работают в моем ежедневном рабочем процессе. Я хотел бы, чтобы свойство yarn.app.mapreduce.am.resource.mb было больше для просто большой работы. Мне повезло? Как я могу определить, какие свойства требуют полного перезапуска, какие части YARN в моем кластере должны быть изменены?

Answer 1

Этот параметр можно изменить на уровне задания без перезапуска службы YARN. Трудно сказать, когда вы можете изменить каждое свойство MR. Обычно параметры уровня работы, такие как настройки карты/редуктора/приложения, могут обновляться на уровне работы.

Вы можете проверить this helpful post, чтобы получить более глубокий взгляд на эту тему.