2017-02-07 8 views
0

Я использую дистрибутив Cloudera 5.8.3, который построен с искрой 1.6.0. Я отправляю работу Spark через oozie (он представлен как действие java)Нет вкладки SQL в истории искры сервера для искры sql job

Я вижу, что задание успешно завершено, а также можно найти его на сервере истории Spark (который также работает для Spark 1.6.0). Я также вижу все детали уровня детализации исполнителя/приложения/рабочих мест/этапов/задач.

Однако, я также знаю, что искра обеспечивает лучшую регистрацию для световых кадров данных, я не вижу эту вкладку. Это вид, о котором я говорю: Sql Tab

Я не уверен, что другие подробности относятся к этому или где еще искать. Надеюсь получить некоторые указатели.

Спасибо!

ответ

0

SQL Tab на сервере истории добавлен в Spark 2.0.0. См. https://issues.apache.org/jira/browse/SPARK-11206

+0

Спасибо. Я не уверен в этом, потому что я могу видеть его на 1.6.0 (на том же сервере истории для других заданий), а также на локальном сервере истории, запущенном через zepplein. –

+0

Я не уверен. Если вы используете официальный пакет Spark, он доступен только с 2.0.0. Некоторые вендеры могут сами поцарапать их 1.6.0 Spark. – zsxwing