mrjob

-1зной

2ответ

Выполнение функции mapreduce в Python

Я пытаюсь изучить немного mapreduce в сочетании с Python. Теперь у меня есть следующий код, выполняемый из учебника, который я делаю. from mrjob.job import MRJob class SpendByCustomer(MRJob):

python mapreduce mrjob 2016-02-21

---

-1зной

1ответ

MRJob с использованием другого интерпретатора Python для локального и хаоса

Я использую MRJob на машине A для запуска работ MapReduce на машинах B_0 thru B_10. У задания есть зависимости, которые требуют, чтобы он выполнялся не по умолчанию /bin/python (т. Е. Выход which pyth

python hadoop mrjob 2016-01-04

---

2зной

3ответ

Набор данных Json-Opening Yelp Data Challenge

Меня интересует интеллектуальный анализ данных, и я пишу свой тезис об этом. Для моего тезиса я хочу использовать набор данных для набора данных yelp, но я не могу его открыть, поскольку он находится

json dataset yelp mrjob 2016-02-23

---

1зной

1ответ

Запуск карты/Уменьшение программ на Python из Sublime Text 2

Я только что начал серию учебников по уменьшению карты и Hadoop. В инструкциях по настройке вызывается использование IDE под названием Canopy с MRjob. Я установил оба, и все работает. Но ... Если Cano

python sublimetext2 mrjob 2016-01-11

---

0зной

1ответ

Вывод STDERR от Hadoop, это означает некоторую проблему?

Я использую Mrjob-Hadoop с python2.7, Ubuntu 14.04, и я имел следующий вывод на экран: no configs found; falling back on auto-configuration no configs found; falling back on auto-configuration creat

python-2.7 hadoop mrjob 2016-01-22

---

0зной

1ответ

Прикрепите тот же снимок EBS к каждому тому EMR?

Я хочу работать с моментальным снимком EBS в задании EMR. Поскольку считыватель отображает снимок, я хочу, чтобы снимок был установлен на каждом узле. Есть ли простой способ сделать это, кроме входа в

hadoop emr mrjob 2015-12-07

---

0зной

1ответ

Масштабирование программы python mrjob на Apache Hadoop

Я пытаюсь запустить простую программу mapreduce на HDInight через Azure. Моя программа написана на python и просто подсчитывает, сколько строк чисел (timeseries) соответствуют определенным критериям.

python azure hadoop hdinsight mrjob 2015-12-09

---

0зной

1ответ

psycopg2.ProgrammingError: отношение * уже существует во время populatig базы данных через MRjob

Я пытаюсь заполнить базу данных postgresql с помощью MRjob. Несколько дней назад кто-то любезно предложил мне here разделить по шагам картографа. Я пытался, но дается ошибка: python db_store_hadoop.py

postgresql python-2.7 hadoop mrjob 2016-02-04

---