apache-spark-1.2

0зной

1ответ

Поддерживать порядок после partion по ключевому groupByKey или aggregateByKey

У меня есть дата, как этот Machine , date , hours 123,2014-06-15,15.4 123,2014-06-16,20.3 123,2014-06-18,11.4 131,2014-06-15,12.2 131,2014-06-16,11.5 131,2014-06-17,18.2 131,2014-06-18,19.2 13

2зной

2ответ

Как подключить Spark-Notebook к улей метасторе?

Это кластер с Hadoop 2.5.0, Spark 1.2.0, Scala 2.10, предоставленный CDH 5.3.2. Я использовал a compiled spark-notebook distro Похоже, что Spark-Notebook не может найти метафоры улья по умолчанию. Как

0зной

1ответ

Спарк 1.2.1 не удается скомпилировать проект сборки

Просто скачал Спарк 1.2.1 и он не компилировать в сборке проекта со следующей ошибкой: The requested profile "hadoop-2.6" could not be activated because it does not exist. [ERROR] Failed to execute g

4зной

3ответ

Как кодировать категориальные функции в Apache Spark

У меня есть набор данных, на основе которых я хочу создать классификационную модель. Каждый ряд имеет следующий вид: user1,class1,product1 user1,class1,product2 user1,class1,product5 user2,class1,p