hdfs

2зной

2ответ

Spark: записывать каждую запись в RDD в отдельные файлы в каталоге HDFS

У меня есть требование, когда я хочу записывать каждую отдельную запись в RDD в отдельный файл в HDFS. Я сделал это для нормальной файловой системы, но, очевидно, это не работает для HDFS. stream.fore

-1зной

1ответ

Hadoop не может начать ./sbin/start-dfs.sh

я начал Shall (./sbin/start-dfs.sh) JPS 3098 Jps<br> 2492 NameNode<br> 2700 SecondaryNameNode hadoop- DataNode-журнал 2017-02-15 15:55:12,787 WARN org.apache.hadoop.hdfs.server.common.Storage: Fai

1зной

1ответ

Перенос файлов из необеспеченных hdfs в защищенный hdfs кластер

Я хотел перенести файлы из незащищенного кластера HDFS в кластеризованный кластер. Я использую distcp для передачи файлов. Я использовал следующую команду. hadoop distcp -D ipc.client.fallback-to-simp

0зной

2ответ

Загрузите 2 поля только из 4 полей - стол для свиней к ульту

Пособие по оказанию помощи Pls. Сценарий: Храните данные с HDFS в Hive с помощью Pig. У меня есть файл, который вычеркивает из mySQL, который имеет 4 поля Ord_Id, Cust_Id, Cust_name, Ord_date. Мне нра

1зной

1ответ

HDFS диск заполнен

В нашем кластере Ambari использование диска HDFS стало 100%. Я хочу удалить таблицы в HBase, чтобы освободить диск, но hbase (master) не запускается. Я попробовал перезагрузку Hdfs, но это не удалось.