hadoop2

0зной

1ответ

Советы по улучшению работы MapReduce в Hadoop

У меня есть 100 карт и 1 редуктор, работающий в задании. Как улучшить работу? Согласно моему пониманию: использование объединителя может значительно улучшить производительность. Но что еще нам нужно н

1зной

1ответ

Как сообщить значение обратно драйверу из карты?

В моем приложении hadoop мне нужно сообщить значение (давайте время, когда обработчик переделан), обратно в программу драйвера. Как я могу это сделать?

3зной

1ответ

Импорт файла CSV в Hadoop

Я новичок с Hadoop, у меня есть файл для импорта в Hadoop через командную строку (я получить доступ к машине через SSH) Как я могу импортировать файл в Hadoop? Как я могу проверить после (команда)?

1зной

1ответ

Задайте свойства задания и переопределите свойства в заданиях hadoop.

У меня есть работа по сокращению карты hasoop (2.2.0), которая читает текст по указанному пути (скажем, INPUT_PATH) и выполняет некоторую обработку. Я не хочу жестко кодировать входной путь (поскольку

1зной

1ответ

Могу ли я полагаться на счетчики счетчиков в переделах в Hadoop?

Рассмотрим случай, когда я изменяю значения счетчиков в картографах и хочу использовать эту информацию в редукторах. Похоже, у нас есть гарантия, что функция уменьшения не будет вызываться до тех пор,

1зной

2ответ

Проблема с каталогом склада в HIVE

После the article to install HIVE я наткнулся на инструкцию для создания каталога с именем warehouse, используя команду hadoop fs -mkdir -p /usr/lib/hive/warehouse (я изменил путь в соответствии с мое

0зной

1ответ

Как сообщить значение от Mapper к программе Driver в Hadoop?

У меня есть программа hadoop, в которой я хотел бы сообщить значение обратно драйверу в конце картографа. Итак, в драйвере я несколько значений, каждый из ячеек ans, а затем хочу получить максимум меж

0зной

1ответ

включить файл, исключить файл - разрешить разъяснение hadoop

Я новичок в hadoop. с использованием Hadoop 2.3.0-cdh5.0.0 В процессе добавления и выведения из строя datanode в кластере с несколькими узлами. Читайте о шагах в книге. Я действительно застрял посеред