mapreduce

30зной

5ответ

Каковы некоторые сценарии, для которых MPI лучше подходит, чем MapReduce?

Насколько я понимаю, MPI дает мне гораздо больше контроля над тем, как будут взаимодействовать разные узлы в кластере. В MapReduce/Hadoop каждый узел выполняет некоторые вычисления, обменивается данны

1зной

1ответ

Hadoop MapReduce job в файле, содержащем HTML-теги

У меня есть куча больших файлов HTML, и я хочу запустить Hadoop MapReduce на них, чтобы найти наиболее часто используемые слова. Я написал и мой картограф и редуктор в Python, и использовал потоки Had

7зной

3ответ

Создание отдельных выходных файлов в потоке Hadoop

Использование только картографа (скрипта Python) и никакого редуктора, как я могу вывести отдельный файл с ключом как имя файла для каждой строки вывода, а не иметь длинные файлы вывода ?

4зной

3ответ

Расщепление вход на подстроки в PIG (Hadoop)

Предположим, у меня есть следующий вход в Pig: some И я хотел бы, чтобы преобразовать его в: s so som some Я (пока) нашел способ итерации над chararray в свинцовом латине. Я нашел функцию TOKEN

20зной

4ответ

Hadoop распределения Различия

Может кто-то очертить различные различия между различными Hadoop Распределения доступны: Cloudera - http://www.cloudera.com/hadoop Yahoo - http://developer.yahoo.net/blogs/hadoop/ используя дистрибути

25зной

5ответ

Может ли OLAP быть выполнен в BigTable?

В прошлом я использовал WebAnalytics, используя кубы OLAP, работающие на MySQL. Теперь куб OLAP, как я использовал, это просто большая таблица (хорошо, она была немного более умна, чем та,), где кажда

2зной

2ответ

Кэширование приложений карты в Hadoop MapReduce?

Рассматривая комбинацию MapReduce и HBase с точки зрения потока данных, моя проблема кажется подходящей. У меня есть большой набор документов, которые я хочу отображать, объединять и уменьшать. Моя пр

6зной

1ответ

Hadoop mapreduce streaming from HBase

Я создаю задание mapdo для Hadoop (0.20.1), которое использует HBase (0.20.1) как источник данных, так и приемник данных. Я хотел бы написать работу в Python, которая потребовала от меня использовать