3
Это хорошо работает с искровой нитью-клиентом, но как насчет пряжи-кластера? Если это возможно, поделитесь тем, как мы можем это сделать.Возможно ли запустить zeppelin с искровой нитью-кластером
A
ответ
0
В настоящее время zeppelin не поддерживает кластер пряжи, только пряжа-клиент. Что послужило бы для этого?
Причина в том, что каждый раз, когда zeppelin нуждается в перезапуске, исполнители убиваются и, следовательно, кеш теряется. Чтобы избежать такого поведения, искра должна работать как кластер пряжи, чтобы драйвер запускался в главном приложении. –
, чтобы добавить к вашему комментарию, нить-кластер управляет всеми JAR-файлами из HDFS без локального копирования, что требует удвоенного времени для создания новой световой сессии. – Maziyar