Hadoop Пряжа Демоны Стоп Запуск

Запуск start-dfs.sh и start-yarn.sh с последующим JPS дает следующий результат:Hadoop Пряжа Демоны Стоп Запуск

8227 ResourceManager 
8328 NodeManager 
7804 NameNode 
8366 Jps 
8077 SecondaryNameNode 
7901 DataNode

Если я бегу JPS примерно спустя 5 секунд, то есть Ouput:

7804 NameNode 
8473 Jps 
8077 SecondaryNameNode 
7901 DataNode

Демон двух нитей (ResourceManager и NodeManager) перестают работать по ряду причин. Любая идея, почему это может случиться?

источник

2013-12-25 Olshansk

Как показано ниже, проверьте журналы, как правило, причины очевидны. – Vishal

Обычно это происходит, когда возникают проблемы с запуском служб. Это может быть много вещей - недостающая конфигурация, проблемы с разрешением и т. Д.

Для получения дополнительной информации вам нужно будет проверять журналы ResourceManager и NodeManager.

источник

2013-12-25 19:45:05

Да, это было много разных вещей. В частности, мне пришлось изменить файлы конфигурации yarn-site.xml и mapred-site.xml. – Olshansk

@ Олшанск Вы могли бы указать, какие свойства вам нужно было изменить? –

К сожалению, это было так давно, что я действительно не могу вспомнить. Если я помню, это связано с общим объемом памяти, который я выделял для всего кластера, в сочетании с количеством карт/редукторов и минимальной/максимальной памятью для каждого преобразователя и редуктора. Сообщите мне, если вы все еще застряли. Я, вероятно, могу копать этот проект и смотреть, и моя история. – Olshansk

ответ

Смежные вопросы