hadoop

3зной

1ответ

Я должен работать над зеркалированием кластеров, где мне нужно настроить аналогичный кластер HDFS (тот же главный и ведомый) как существующий, и скопировать данные в новое, а затем запустить те же зад

0зной

1ответ

Как настроить Apache Hive?

Я использую hasoop 2.6.0 для разработки приложения mapreduce. Помимо этого, я хочу сравнить производительность от mapreduce и улья Apache. Итак, как я могу настроить улей apache в верхней части сущест

1зной

1ответ

Любой эквивалентный файл для TestDFSIO в hadoop 2.4.0?

Я новичок в hadoop. Я хочу сделать тест на стресс/производительность на кластерах hadoop. Для этого я следовал инструкциям, приведенным в Hadoop benchmarking. Разница заключается в том, что в учебнике

7зной

1ответ

Pydoop stucks на readline из файлов HDFS

Я читаю первую строку всех файлов в каталоге, на локальном уровне он отлично работает, но на EMR этот тест терпит неудачу, застряв около 200-300-го файла. Также ps -eLF показывает увеличение числа дет

1зной

6ответ

Apache Hive: невозможно выполнить экземпляр org.apache.hadoop.hive.metastore.HiveMetaStoreClient

Я пытаюсь установить Apache Hive, я вставляю HIVE_HOME и HADOOP_HOME в hive_config.sh, и я копирую куст улья в файл $ HADOOP_HOME/lib Но когда обед его, используя hive command этой ошибки появляется:

1зной

1ответ

nodemanager подключен к resourcemanager, но datanode не подключен к namenode

Я устанавливаю hadoop 2.5.1 поверх CentOS 7.0. (1) Когда я запускаю приложение поверх хаоса, я сомневаюсь, что ниже пути сообщения «/tmp/hadoop-yarn/staging/hadoop/.staging/job_1424775783787_0001/file

0зной

1ответ

Не удалось создать проект MapReduce с Eclipse

Я пытаюсь создать проект MapReduce в первый раз с Eclipse Luna, но не могу этого сделать. Я получаю следующее исключение во всплывающем окне. «Выбранный мастер не может быть запущен плагин org.apache.