apache-crunch

0зной

1ответ

Как преобразовать существующие приложения MapReduce в Crunch?

У меня есть несколько (около дюжины) задач MapReduce, каждая из которых функционирует как часть рабочего процесса, выполняемого простым скриптом bash. По целому ряду причин я хотел бы переместить рабо

hadoop mapreduce apache-crunch 2016-01-20

---

0зной

1ответ

java.lang.NoClassDefFoundError: орг/Apache/Hadoop/HBase/MapReduce/MultiTableInputFormat

При выполнении теста на MapReduce работу на minicluster Hadoop, я получаю сообщение об ошибке: java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/mapreduce/MultiTableInputFormat at org.apache.cru

hadoop mapreduce hbase integration-testing apache-crunch 2016-12-02

---

2зной

1ответ

, что сокращение карты работы может сделать, но crash apache не может?

Я изучаю хруст апача. Насколько я знаю, хруст - это структура абстракции, основанная на каркасе сокращения. Я намерен использовать хруст вместо каркаса сокращения. Мой вопрос в том, какая работа, кото

mapreduce apache-crunch 2015-12-22

---

1зной

1ответ

Не удалось установить mapred.job.queue.name в Oozie java action

У меня есть приложение, которое запускает задания crunch. Я пытаюсь настроить Oozie для запуска этой работы с помощью java-действия. Мои действия, как указано ниже, <workflow-app name="Wworkflow" xmln

java hadoop oozie oozie-coordinator apache-crunch 2015-11-06

---

1зной

1ответ

Как конвейер Apache Crunch генерирует карту, сокращает количество заданий?

Я новичок в инфраструктуре конвейера hadoop, как Crunch/Cascading. Мне было интересно, в нижней части этих фреймворков, они генерируют оригинальный класс картографа и редуктора, например, оригинальную

java hadoop bigdata apache-crunch 2015-10-06

---