mapreduce

1зной

1ответ

Удалите все предложение, содержащее определенное слово с MapReduce

Я изучаю MapReduce, и я хочу прочитать входной файл (предложение по предложению) и написать каждое предложение в выходной файл, только если он не содержит слова «змея». E.g. Входной файл: This is my f

0зной

1ответ

MapReduce job, чтобы получить 10 лучших значений с использованием MRjob Python

Я хочу, чтобы эта карта уменьшала работу (код ниже) для вывода 10 самых рейтинговых продуктов. Он продолжает давать мне следующее сообщение об ошибке: it = izip (iterable, count (0, -1)) # decorate Ти

0зной

1ответ

Ошибка Hadoop Mapreduce на EC2 - вызов с master/ip на master: 9000 не удалось выполнить

, поэтому я установил простой кластер с двумя узлами на частном AWC VPC. Поэтому я использую частный IP и DNS вместо публичного IP, который они дают вам AWS. У меня работает HDFS, и я могу использоват

0зной

3ответ

Является ли tasktracker соответствующим картеру или редуктору в hadoop?

Я знаю, что картограф всегда выполняет пары операций с картами, а редуктор всегда выполняет пары операций сокращения. Другими словами, сопоставление между оператором mapper (редуктор) и map (reduce) я

1зной

1ответ

В чем причина этой неудачи в hadoop?

Это происходило часто в моей работе hadoop при выполнении задачи уменьшения. Некоторые причины этой проблемы могут заключаться в том, что редуктор не писал контекст в течение длительного времени, поэт

0зной

2ответ

Запуск реализации пользовательского формата вывода в учебном пособии Hadoop

Я хочу запустить код, описанный в этом tutorial, чтобы настроить выходной формат в Hadoop. Точнее, учебник показывает два Java файлы: WordCount: это приложение количество слов Java (по аналогии с Word

3зной

2ответ

MongoDB MapReduce, возврат только при подсчете> 1

У меня есть данные в MongoDB. Структура одного объекта, как это: { "_id" : ObjectId("5395177980a6b1ccf916312c"), "institutionId" : "831", "currentObject" : { "systemIdentifiers"

0зной

2ответ

Проблема с Java и максимальным значением

Я работаю с List из Person объектов. Я пытаюсь быстро идентифицировать и вернуть все Person с максимальной датой. Например: Persons:[ { id: 1 submitDate: 2010-01-01 name : john Smith