hdfs

0зной

1ответ

Как реализовать многоуровневое хранение в HBase?

Я пытаюсь получить информацию о реализации многоуровневого хранилища на HBase, который работает по HDFS. Я прочитал о многоуровневом хранилище на HDFS с этого link. Я также прошел через это link, но у

0зной

1ответ

Systemd Hdfs Service [hadoop] - startup

Я создал службу, которая запускает и останавливает мои hdfs, связанные с моим искровым кластером. служба: [Unit] Description=Hdfs service [Service] Type=simple WorkingDirectory=/home/hduser ExecS

3зной

1ответ

Медленный паркет пишите в HDFS используя Spark

Я использую Spark 1.6.1 и записываю HDFS. В некоторых случаях кажется, что вся работа выполняется одним потоком. Почему это? Кроме того, мне нужны паркетные метаданные для регистрации паркетных файлов

2зной

4ответ

Корневой файл dir:/tmp/hive на HDFS должен быть доступен для записи. Текущие разрешения: -wx ------

Я изменил разрешение, используя команду hdfs. Тем не менее он показывает ту же ошибку. Корневой корневой каталог:/tmp/hive на HDFS должен быть доступен для записи. Текущие разрешения: -wx ------ Прогр

3зной

2ответ

искры сохранять и читать на паркет HDFS

Я пишу этого код val inputData = spark.read.parquet(inputFile) spark.conf.set("spark.sql.shuffle.partitions",6) val outputData = inputData.sort($"colname") outputData.write.parquet(outputFile) //wr

0зной

1ответ

How or Why Hive позволяет изменять таблицу? Является ли это НЕ нарушением записи HDFS. Как только это будет сделано.

Улей работает на HDFS. И его назначение по умолчанию - «/ user/hive/warehouse» в HDFS. С Hive мы можем создать таблицу и «ALTER». Таблица изменения включает удаление/изменение существующих столбцов в

3зной

2ответ

Spark написать паркет по hdfs

У меня есть 3 узла, которые установлены и установлены искры. Я хотел бы взять данные из rdbms в кадр данных и записать эти данные в паркет на HDFS. Значение «dfs.replication» равно 1. Когда я пробую э