mapreduce

0зной

1ответ

MongoDB игнорирует readPreference при запуске MapReduce на закрытом кластере?

Моя цель - заставить мою работу по сокращению карты всегда работать на вторичной обломочности моего кластера MongoDB. Я устанавливаю readPreference на вторичный и параметр out команды MapReduce на inl

0зной

1ответ

Получить каталог журнала контейнеров пряжи в mapper/reducer

Есть ли API, чтобы получить расположение каталога журнала пряжи в моей реализации метода сопоставления/редуктора? Так, например, если у меня есть следующий CONFIG yarn.nodemanager.log-dirs=/mnt/yarn/l

0зной

2ответ

Сравнение двух файлов Excel с использованием Hadoop Mapreduce

Я новичок в Hadoop и Mapreduce. У меня есть требование сравнить два файла excel с помощью mapreduce. Я должен перейти к mapreduce, так как размер этих файлов будет очень большим (> 10gb). Мой вопрос з

0зной

2ответ

Как читать предложение вместо строки с помощью WordCount MapReduce tutorial

Я изучаю Hadoop MapReduce, и я следую WordCount tutorial. В следующем фрагменте кода я понимаю, что метод map обрабатывает одну строку за раз, как указано указанным TextInputFormat. Затем он разбивает

0зной

1ответ

Cloudera Hive: FAILED: Ошибка выполнения, код возврата 2 из org.apache.hadoop.hive.ql.exec.mr.MapRedTask MapReduce

Я продолжаю получать эту ошибку при попытке запроса данных с использованием оттенка FAILED: Ошибка выполнения, возврат код 2 из org.apache.hadoop.hive.ql.exec.mr.MapRedTask MapReduce из браузера оттен