yarn

0зной

1ответ

Hadoop игнорирует mapreduce.input.fileinputformat.split.maxsize при создании разделов

Мы используем HDP2.5 и имеем задание, которое обрабатывает некоторые строки из HBase. Я установил ключ запуска и конец ключа для задания, а также попытался установить mapreduce.input.fileinputformat.s

1зной

1ответ

HDP 2.5: Интерфейс сервера истории Spark не будет показывать неполные приложения

Я установил новый кластер Hadoop с Hortonworks Data Platform 2.5. В «старом» кластер (установлено HDP 2.4) я был в состоянии видеть информацию о выполнении заданий Spark, по истории сервера интерфейсу

0зной

1ответ

Ошибка Hadoop Mapreduce на EC2 - вызов с master/ip на master: 9000 не удалось выполнить

, поэтому я установил простой кластер с двумя узлами на частном AWC VPC. Поэтому я использую частный IP и DNS вместо публичного IP, который они дают вам AWS. У меня работает HDFS, и я могу использоват

2зной

1ответ

Выполнить команду на EMR Slaves?

Я пытаюсь обновить действующий кластер EMR с установкой pip на всех подчиненных машинах. Как я могу это сделать? Я не могу сделать это с помощью этапа начальной загрузки, потому что это длинный EMR, и

0зной

2ответ

Весенний поток и пряжа: как правильно установить свойства?

Как можно изменить свойства appdeployappmaster по умолчанию? Когда я пытаюсь развернуть приложение через Spring DataFlow YARN. Я зарегистрировал свое приложение, создал поток и нажал кнопку «развернут

0зной

1ответ

Как развернуть автономное приложение с Spring DataFlow?

Мое приложение настроено на чтение темы из сконфигурированного Kafka, а затем записывает преобразованный результат в Hadoop HDFS. Для этого его нужно запустить на узле кластера пряжи. Для этого мы хот

0зной

1ответ

Изменить минимальный размер кучи исполнителя в искровой на пряжу

Я хочу изменить начальный/минимальный размер кучи моих исполнителей во время работы искры на пряжу. Сейчас он бросает следующее исключение, java.lang.Exception: spark.executor.extraJavaOptions не разр