hadoop2

0зной

1ответ

Количество разделов и задач карты в hadoop

Я новичок в Map Сокращение программирования, я написал свой алгоритм в python, и мне нужно запустить экземпляры «n» для одной и той же программы (мой алгоритм) в наборе данных «n». Поскольку мой код н

0зной

1ответ

ведомые узлы DataNode не находятся в хранилище главного узла

В последнее время я установить Hadoop многоузловой кластер на Ubuntu, все идет, NameNode и вторичный узел (его имя HadoopMaster), все ведомые 2 (HadoopDataNode1, HadoopDataNode2) в проблема при запуск

3зной

1ответ

Выполнение заданий с использованием кластера EMR и файлов s3 из другой учетной записи

Я хотел бы знать, есть ли способ доступа к файлам jar и местоположению ввода и вывода из s3 другой учетной записи. У меня есть кластер EMR, работающий на учетной записи 1. Я хочу получить доступ к фай

1зной

1ответ

Возможно ли планировать работу по сокращению количества работ на определенных подчиненных узлах?

Возможно ли запланировать любую работу по сокращению карты на некоторых узлах, а не всех узлах, в кластере Hadoop? Скажем, например, на 4 подчиненных узлах из 10 доступных узлов. Я пробовал искать в G

0зной

1ответ

Где хранятся журналы mahout

Я новичок в Mahout. Я запустил задачу кластеризации mahout, но это не удается. Я не могу понять, почему эта задача не работает, поэтому где хранятся журналы mahout. Заранее спасибо.

1зной

1ответ

Настройка Hadoop YARN на ubuntu (единственный узел)

Я устанавливаю Hadoop YARN (2.5.1) на Ubuntu 13 как кластер с одним узлом. Когда я запускаю start-dfs.sh, он дает следующий результат, и процесс не запускается (я подтвердил usng команды jps и ps). Мо

0зной

1ответ

Как создать приватную подсеть с использованием AWS java SDK

Я могу создать подсеть в моем vpc. Но, это публичная подсеть. Однако я хотел бы создать приватную подсеть, связанную с моим VPC. Как я мог добиться этого. Благодарю. частного createSubnet статического

2зной

1ответ

namenode не придумал hadoop YARN

Я использую hadoop YARN на ubuntu. Я установил каталог hadoop (а также каталоги каталогов данных и наменований) в каталоге/usr/local. Всякий раз, когда я запускаю start-dfs.sh, namenode не появляется

0зной

1ответ

Map-Уменьшить не уменьшая, как ожидалось, со сложными ключами и значениями

Независимо от того, насколько я могу сделать compareTo моего сложного ключа, я не получаю ожидаемых результатов. За исключением случаев, когда я использую один ключ, который будет одинаковым для каждо