Apache Cascading on Mesos

Question

В настоящее время я изучаю Mesos и задаюсь вопросом, можно ли выполнять задания, заданные с помощью Cascading в пуле Mesos. Поскольку Mesos поддерживает потоки Hadoop и Cascading, скомпилированные в файлы hadoop jar, я предполагаю, что это возможно. Но нужно ли мне соблюдать определенные настройки?

Answer 1

Нет ничего особенного в том, чтобы выполнять каскадные задания с помощью Hadoop на Mesos. Однако вам необходимо установить и настроить Hadoop. Вероятно, вы захотите использовать HDFS в дополнение к реализации MapReduce.

• Для MR1, проект живет здесь: https://github.com/mesos/hadoop
• Для MR2, проект живет здесь: https://wiki.apache.org/incubator/MyriadProposal