mapreduce

0зной

1ответ

Apache Pig - inested FOREACH по тому же отношению

У меня есть несколько сумок, и я хочу вычислить попарные сходства между сумками. sequences = FOREACH raw GENERATE gen_bag(logs); Соотношение описывается следующим образом: sequences: {t: (type: char

8зной

2ответ

Подсчет биграмм очень быстрый (с или без многопроцессорности) - python

Удар big.txt от norvig.com/big.txt. Цель состоит в том, чтобы считать биграмм очень быстрым (представьте, что я должен повторить этот счет 100 000 раз). Согласно Fast/Optimize N-gram implementations i

1зной

1ответ

NullPointerException в toString() метод класса CustomArrayWritable, MapReduce

Я пытаюсь использовать Time_Ant10s (нестандартный класс ArrayWritable) в качестве вывода Reducer. Я рассматриваю этот хороший вопрос: MapReduce Output ArrayWritable, но я получаю NullPointerException

2зной

1ответ

Цепных функций на основе массива значений

У меня есть массив произвольной длина, содержащее что-то вроде: const arr = [{key: 345}, {key: 786}, {key: 980}]; Я хочу вернуть функцию, которая возвращает посыл цепочку, используя массив. functi

1зной

1ответ

Контейнера завершился с 1 ошибкой ненулевой коды выхода во MapReduce задаче

Исполняя баночку в Hadoop, я получаю следующее сообщение об ошибке: 16/11/04 18:32:59 INFO mapreduce.Job: Task Id : attempt_1478261728730_0005_m_000000_2, Status : FAILED Exception from container-lau

1зной

4ответ

javascript - группировка элементов в массиве по свойствам

Я пытаюсь фильтровать одни и те же цветовые объекты из ниже json, и каждое значение цвета содержит комбинацию из двух значений (цветное и числовое значение), но я просто хочу фильтровать по цвету , Во