Я пытаюсь настроить кластер Spark на машинах Windows.
Путь сюда - это использовать автономный режим, верно?
Каковы конкретные недостатки использования Mesos или YARN? И насколько больно было бы использовать один из них? У кого-нибудь есть опыт?Как настроить Spark-кластер на компьютерах Windows?
FYI, я получил ответ на пользователя-группы: https://groups.google.com/forum/#!topic/spark-users/SyBJhQXBqIs
Автономный режим действительно путь. Mesos не работает под Windows и YARN, вероятно, ни того, ни другого.
Быстрое примечание. YARN должен в конечном итоге работать с Windows через платформу данных Hortonworks (бета-версия версии 2.0 находится на YARN, но в настоящее время она находится на Linux). Другим потенциальным маршрутом является его работа с Hadoop 1.1 (Hortonworks Data Platform для Windows 1.1), но ваш подход к тому, чтобы он работал в автономном режиме, является, безусловно, самым легким для получения земли.