mapreduce

0зной

1ответ

Соответствующих лиц с Google AppEngine MapReduce

У меня есть следующая проблема: Я использую Google Datastore для хранения двух видов, компаний и соискателей, оба они из разных источников данных, так что нет никакого способа, чтобы связать их непоср

python google-app-engine mapreduce google-cloud-datastore 2016-09-27

---

2зной

2ответ

Невозможно загрузить файлы размером более 100 МБ в HDFS

Я столкнулся с действительно странной проблемой с моим кластером. Всякий раз, когда я пытаюсь загрузить любой файл в HDFS, который больше, чем 100 Мб (104857600 байт) он терпит неудачу со следующей ош

hadoop mapreduce hdfs data-ingestion 2016-09-29

---

0зной

2ответ

Сбой задания mapreduce с "org.apache.commons.codec.binary.Base64.encodeBase64String ([B) Ljava/lang/String;"

Я выполнил задание MR на своем кластере на трех узлах, каждый из которых имеет 128 ГБ и 40 ядер. кластера Информация: 10.8.12.16: NameNode активен, DataNode, alluxio мастер, alluxio работник 10.8.12.1

mapreduce yarn tachyon 2016-09-29

---

0зной

1ответ

Hadoop Streaming простая работа с ошибкой python

Я новичок в hadoop и mapreduce, я пытаюсь написать mapreduce, который учитывает 10 самых популярных слов слова txt-файла. Мой TXT-файл 'q2_result.txt' выглядит следующим образом: yourself 268 yourse

java python hadoop mapreduce streaming 2016-09-30

---

0зной

2ответ

Уличные запросы постоянно терпят неудачу. Как оптимально присоединиться к очень большим таблицам?

Я пытаюсь (внутренне) объединить две таблицы на HDFS, разделенные на «день» (дата) в течение нескольких дней (скажем, 2 недели). Обе таблицы содержат 100 столбцов, но я пытаюсь запросить только 10 из

hadoop join mapreduce hive query-optimization 2016-10-01

---