apache-spark

1зной

1ответ

Возможно ли создать экземпляр DataFrame с помощью столбца Unicode?

Я пытаюсь создать DataFrame, у которого есть столбец, в котором хранятся данные unicode вместо стандартного python string, потому что у моего языка есть дополнительные буквы с акцентом, например. ñ, á

0зной

2ответ

Есть ли способ визуализации Spark mllib Random Forest Model?

Я не могу найти способ визуализировать мою модель RF, полученную с использованием Spark MLLib RandomForestModel. Модель, напечатанная как строка, представляет собой всего лишь набор вложенных оператор

0зной

1ответ

Почему сообщение о недоумении журнала модели LDA настолько медленное в Spark mllib?

Я устанавливаю модель LDA в Spark mllib, используя OnlineLDAOptimizer. Требуется ~ 200 секунд, чтобы соответствовать 10 темам на 9M-документах (твиты). val numTopics=10 val lda = new LDA() .setO

0зной

1ответ

Как получить доступ к значению аккумулятора в задачах?

Я пытаюсь получить доступ к значению аккумулятора в задаче кластера. Но когда я делаю так, он бросает исключение: не может прочитать значение аккумулятора в Я пытался использовать row.localValue но он

-1зной

1ответ

Подсоединение к Spark через SSH

У меня установлен один узел кластера usoop. Я пытаюсь выполнить SPARK Scripts из моего краевого узла, чтобы попасть в узел хаоса через SSH. Я ищу, как выполнить скрипты SPARK с пограничного узла, чтоб