2017-01-04 13 views
-1

Я запускаю dcos spark-submit, и он постоянно загружает изображение докеров, говоря, что похоже, что вы работаете в первый раз. Dint найти любой удар по этому на google.mesos dcos: искра продолжает загружать изображение докера

spark_submit_jobs$ dcos spark run --submit-args='-Dspark.mesos.coarse=true --driver-cores 1 --driver-memory 1024M --class org.apache.spark.examples.SparkPi https://downloads.mesosphere.com/spark/assets/spark-examples_2.10-1.4.0-SNAPSHOT.jar 30' 

Spark distribution spark-1.6.2 не найден на месте. Похоже, это ваш первый запуск Spark! Загрузка https://downloads.mesosphere.com/spark/assets/spark-1.6.2.tgz ...

Пробовал удалять и устанавливать искру.

Я бегу: 1.0.1-1.6.2 и 1.0.6-2.0.2-Hadoop-2,6

У меня есть две группы, работающие две различные версии искры на одной все нормально, а на другой его вызывая проблемы с более старой версией.

+0

Что вы имеете в виду «удаление и установка искры»? Это не имеет особого смысла ИМО, потому что вы, кажется, работаете с изображениями Docker, то есть не будет «установки» ... – Tobi

+0

@Tobi, когда я сказал, что установка имела в виду, пакет install: пакет dcos install --package-version = 1.0.1-1.6.2 - испускание = искра. – cloudvar

ответ

0

Возможны две причины:

1.6.2 сохраняет файл в директории TMP, который получает перезаписаны каждый раз попробовать с 1.6.3

Использование учетной записи суперпользователя для запуска DCOS команды.