mapreduce

0зной

1ответ

Как локально проверить карту и уменьшить код?

Если у меня есть файл map.py, который читает из нескольких файлов csv и создает пары ключ-значение, как я могу передать их на мой редуктор.py и проверить локально?

python hadoop mapreduce bigdata 2017-02-18

---

0зной

2ответ

один редуктор против нескольких редукторов с последующей обработкой для подсчета слов и сортировки. Какой из них более эффективен и масштабируемо?

Я делаю подсчет слов с сортировкой (по значению) в одной задаче MapReduce. Два пути для достижения этой цели: Используя один редуктор и сохранение все в HashMap в функции уменьшения и сортировки все п

java hadoop mapreduce 2017-02-18

---

0зной

1ответ

Итеративное значение Reducer, по-видимому, непоследовательно в Java MapReduce

У меня есть следующий код внутри моей функции сокращения. Когда я пытаюсь сделать мелкую копию с помощью CollectionUtils.addAll, копия не удалась; все элементы будут иметь ссылку на элемент LAST вмест

java hadoop mapreduce iterator 2017-02-19

---

1зной

1ответ

Как удалить оба дубликата из словаря?

Я пишу редуктор для программы MapReduce, которая должна читать два файла csv: all-bills.csv и open-bills.csv. То, что я хочу сделать, это удалить значения в открытых счетах со всех счетов, чтобы я мог

python mapreduce 2017-02-20

---

3зной

2ответ

Записи счетчика в MongoDB по регулярному выражению

У меня есть записи в базе данных, содержащей URL-адреса. Например, https://www.youtube.com/watch?v=blablabla. Я хочу подсчитывать URL-адреса для каждого сайта. Например [{ site: 'youtube.com',

javascript regex mongodb mapreduce 2017-02-21

---

0зной

1ответ

Ошибка при использовании InverseMapper и IdentityReducer при выполнении MapReduce

Итак, у меня есть огромный файл журнала доступа, и я пытаюсь найти Path на сервере, который попал в Most. Это традиционная проблема с количеством слов, чтобы найти количество раз, когда попал путь. Но

hadoop mapreduce 2017-02-21

---

0зной

1ответ

Количество карт, которые запускаются для работы свиньи.

Q1- Число запущенных для работы свиньи числа картографов зависит только от количества входных расщеплений? Q2: зависит ли количество преобразователей от операторов, которые мы используем в скрипте сви

hadoop mapreduce apache-pig 2017-02-22

---

2зной

1ответ

Почему я получаю nan в результате большинства моих результатов

У меня есть функция Reduse в mongoDB. Я хочу печатать AVG городов в каждом штате. я получаю только один правильный результат и остальное будет нан функциональна карта function map(){ key = {state : t

javascript mongodb mapreduce 2017-02-23

---