tachyon

0зной

1ответ

Можно ли запретить Тахиону писать в underFS?

Можно ли запретить тахиону писать в underFS? Я бы хотел, чтобы он хранил данные только на диске памяти и не записывал их в underFS. Возможно ли это или поддерживается? С уважением, Майком

1зной

1ответ

Spark on Tachyon (alluxio). Размер рамки (273247862) больше максимальной длины (16777216)

Я следую руководству по развертыванию искры на Alluxio. При попытке загрузить данные из alluxio запустить операцию РДД, VAL КТС = sc.textFile ("alluxio: // локальный: 19998/findbugs.xml") ccc.count ош

0зной

1ответ

Deploy тахион с анзибль без SSH связи между тем, как отформатировать мастер

На данный момент тахионом серверов, т.е. является развертывание на локальном режиме, т.е. http://tachyon-project.org/documentation/v0.7.1/Running-Tachyon-Locally.html Моя главная проблема здесь являет

0зной

1ответ

Как установить alluxio1.2 в openstack

Я пытаюсь установить alluxio1.2 на VM centos на openstack с искровым и hdfs, но установка не работает. Свечи и HDFS уже установить и работать ERROR logger.type (AlluxioMaster.java:main) - Uncaught exc

0зной

2ответ

Сбой задания mapreduce с "org.apache.commons.codec.binary.Base64.encodeBase64String ([B) Ljava/lang/String;"

Я выполнил задание MR на своем кластере на трех узлах, каждый из которых имеет 128 ГБ и 40 ядер. кластера Информация: 10.8.12.16: NameNode активен, DataNode, alluxio мастер, alluxio работник 10.8.12.1

0зной

1ответ

Как включить отказоустойчивость на основе линейки для интеграции Spark-Tachyon?

Я пытаюсь реализовать совместное использование RDD/Dataframe с помощью Tachyon. Насколько я понимаю, с HDFS underFS записи являются асинхронными (с репликацией на HDFS, происходящим за сценой) и, след

0зной

2ответ

Прочитайте несколько файлов с Spark java от Alluxio медленно

У меня есть Alluxio на локальном с Spark, и я вставляю 1000 файлов в память Alluxio. Тем не менее, чтение файла происходит очень медленно, время чтения файла из памяти Alluxio равно время чтения файла