2015-01-21 2 views
0

Я знаю, что HDFS - это однократная запись и чтение нескольких раз. По моим сведениям, невозможно обновить файл (случайным образом) в HDFS, потому что файл хранится в распределенной среде (в виде блоков), причем каждый блок реплицируется на других узлах, что было бы сложно для обновления данных, даже эти реплицированные блоки ,Обновление файла в HDFS через Hue

Но, мой вопрос, можно ли обновлять файлы в HDFS, используя оттенок tool ?. Потому что я обновил много файлов (хранящихся в HDFS) с помощью инструмента hue и выполнил задания по уменьшению количества карт на нем. Итак, как это возможно для оттенка для обновления файлов в HDFS. hue сделать что-то в фоновом режиме? Являются ли обновления, сделанные через оттенок действительно обновлены в том же файле? или hue удаляет файл и переписывает весь файл (включая наши новые данные, которые мы хотим обновить)?

ответ

1

Hue удаляет и перезаписывает весь файл, так как HDFS не поддерживает выпуски. Вы можете заметить, что Hue ограничивает выпуск только небольшими файлами.

Это сообщение в блоге, чтобы узнать больше о HDFS Filebrowser.

+0

О, ладно, это было мое предположение. Спасибо за ответ и отправку ссылки. – barath