hadoop-partitioning

0зной

3ответ

Как работать с определенной частью файла cvs, загруженным в HDFS?

Как работать с определенной частью файла cvs, загруженным в HDFS? Я новичок в Hadoop, и у меня есть вопрос, который заключается в том, что я экспортирую реляционную базу данных в файл cvs, а затем заг

1зной

2ответ

Значение вывода редуктора для двух разных ключей в одном файле

Привет, Я написал задание mapreduce, которое в основном анализирует XML-файл. Я могу разобрать XML-файл и получить всю пару ключей, сгенерированных правильно. У меня есть 6 разных ключей и соответству

0зной

2ответ

hadoop распределяет перегородки на редуктор

Для причин балансировки нагрузки я хочу создать больше разделов, чем редукторы в среде Hadoop. Есть ли способ назначить разделы конкретным редукторам, и если да, где я могу их определить. Я написал от

6зной

1ответ

Понимание алгоритма mapreduce для вычисления перекрытия

Я хочу помочь понять алгоритм. Сначала я вставил алгоритм, а затем мои сомнения. Алгоритм :(Для расчета перекрытия между парами записей) Учитывая определяемый пользователем параметр К, файл ДР (* Форм

1зной

2ответ

hadoop - как определяются сумматоры

Я новичок в hadoop и только что установил виртуальный бокс oracle и песочницу hortonworks. Затем я загрузил последнюю версию hadoop и импортировал файлы jar в свою программу java. Я скопировал пример

0зной

1ответ

Как увеличить задачи карты памяти с помощью реализации getSplits

Я хочу обрабатывать многострочные CSV-файлы, и для этого я написал custom CSVInputFormat. Я хотел бы иметь около 40 потоков обработки CSV строк на каждом узле. Тем не менее, когда я создать кластер на