hadoop2

1зной

1ответ

Hadoop меняет IP-адреса

Я установил Hadoop 2.2.0 (мини-кластер) в Ubuntu 14.04. Есть три узла, один мастер и два подчиненных. Во время установки мне пришлось вводить ip-адреса узлов в /etc/hosts. Мои узлы получают ip-адреса

hadoop hadoop2 2014-10-15

---

0зной

1ответ

Конфигурация файла Hadoop xml

Какая правильная конфигурация hdfs-site.xml файл при настройке Hadoop. На всех сайтах, которые я вижу это: <property> <name>dfs.replication</name> <value>1</value> </property> <property> <name>df

hadoop hadoop2 2014-10-18

---

1зной

2ответ

Какова минимальная конфигурация, необходимая для выполнения Hadoop-доказательства концепции в облаке?

Я ищу так руководство и советы в понимании, что нужно сделать, чтобы сделать разумное доказательство концепции Hadoop в облаке? Я полный noob в мире Big Data Analytics, и я буду более чем счастлив за

hadoop mapreduce hadoop2 2014-10-19

---

0зной

1ответ

ОШИБКА 1200: Неожиданный символ?

Я программировал на свинье, и произошла ошибка, которую я не смог решить. Вот код, который я пытаюсь запустить: --Load files into relations month1 = LOAD 'hdfs:/data/big/data/weather/201201hourly.txt

hadoop apache-pig hadoop-streaming hadoop2 2014-10-19

---

0зной

1ответ

Почему ShuffleConsumerPlugin не запускается перед отображением?

Я создал пользовательскую реализацию ShuffleConsumerPlugin, и он работает. Тем не менее, он создается после выполнения моей задачи сопоставления: org.apache.hadoop.mapred.LocalJobRunner: Waiting for m

java hadoop hadoop2 2014-10-20

---

2зной

1ответ

Запуск MapReduce приложений на Apache YARN с использованием Java-клиента

Я хочу запустить приложение MapReduce в кластере YARN с использованием кода клиента Java. Например, я хочу отправить WordCount, который находится в файле hadoop-examples.jar в кластер YARN из 16 машин

java hadoop mapreduce yarn hadoop2 2014-10-22

---

0зной

1ответ

, как: искры пряжи кластера

Я создал Hadoop кластер с 3-мя машинами один мастер и 2 ведомый В мастер я установил искру SPARK_HADOOP_VERSION=2.4.0 SPARK_YARN=true sbt/sbt clean assembly Добавлено HADOOP_CONF_DIR =/USR/местные/H

apache-spark yarn hadoop2 2014-10-23

---

3зной

1ответ

Каков максимальный контейнер (контейнеры) в одноузловом кластере (hadoop)?

Я новичок в hadoop, и я еще не знаком с его конфигурацией. Я просто хочу спросить максимальный контейнер на узел. Я использую один узел кластера (6GB оперативной памяти ноутбук) и ниже мой mapred и пр

apache hadoop mapreduce yarn hadoop2 2014-10-24

---