hdfs

0зной

2ответ

Запись в HDFS через многопоточность vs с использованием таких опций, как hbase/hive

Мне нужно навалом писать в систему hadoop, используя JAVA API, эффективным способом. Просто проверьте параметры здесь. Является ли запись HDFS через многопоточность дорогостоящей операции по сравнению

1зной

4ответ

Запись на HDFS в Spark/Scala

Я пишу программу spark/scala для чтения в ZIP-файлах, разархивировать их и записать содержимое в набор новых файлов. Я могу заставить это работать для записи в локальную файловую систему, но задавался

0зной

1ответ

org.apache.hadoop.ipc.RemoteException: Пользователь: не разрешено выдавать себя за него

Я был успешным в основном в работе hadoop и улей на Windows изначально (без cygwin). Для Hive все, что я сделал, это то, что я распаковал официальный zip-файл и установил HIVE_HOME и PATH. Кроме того,

1зной

1ответ

Как заставить CTAS генерировать один файл?

Я использую HDP 2.5 с улей. Когда я создаю таблицу hive, используя нижеследующий запрос; create table Sample_table row format delimited fields terminated by '|' stored as textfile AS select * fr

0зной

2ответ

Ручка Hadoop для журналов по нескольким узлам

У меня есть десять sevrers, каждый из которых будет генерировать файлы журналов 3G каждый день. Я завершил учебное пособие по хаупу и установил каждый хаос (HDFS) на каждой машине. Я хочу использовать

0зной

3ответ

Изменить разрешения для существующего пользователя в hdfs на linux

Я новичок в Hadoop, и я столкнулся с проблемой, я не уверен, как ее решить. У меня есть два существующих пользователя HDFS: один называется hdfs, а один называется user1. Когда я пишу файл в HDFS как