hdfs

0зной

1ответ

Я хочу использовать snakebite для проверки наличия файла в каталоге hdfs и создания, если он не существует. Я после документации по touchzhere и использовать его как это: def createFile(client):

0зной

1ответ

Посадочные файлы в разных каталогах в hdfs kafka, flume

Я хочу отправить файлы csv с одного сервера (Unix Server A) в hdfs-каталоги. На основе каких CSV-файлов я хочу поместить их в разные каталоги в hdf. У меня есть 11 csv файлов, которые будут отправлены

3зной

1ответ

Добавить файл в HDFS с веб-интерфейса Hadoop

Есть ли способ добавить файлы в HDFS с помощью веб-интерфейса. http://localhost:50070/ или на другом языке. Существует ли что-то подобное?

-2зной

1ответ

удалить клонированный файл в удаленном кластере hadoop

Я создал репозиторий на GitHub и клонировал его в удаленный кластер hadoop git clone <link of my repository>. Теперь я хочу удалить этот репозиторий из кластера hadoop. Как я могу это сделать? Я попыт

2зной

2ответ

с использованием другой схемы avro для новых столбцов

Я использую flume + kafka, чтобы поместить данные журнала в hdfs. Мой тип данных раковины - Avro. В схеме avro (.avsc) имеется 80 полей в виде столбцов. Так что я создал внешнюю таблицу как этот CREAT

0зной

2ответ

Автоматически копировать файлы с локального на Hadoop

Я хочу скопировать обновленные файлы из локальной файловой системы в Hadoop каждый час, когда я хочу положить в cron. Есть ли какая-либо команда hadoop, которую я могу использовать для копирования обн

1зной

1ответ

HDFS IO Failure «путь не файл»

Недавно я обновил свой h2o с 3.6.0.8 до 3.10.0.9 на hadoop и использую api python. Ранее (с использованием 3.6) я использовал следующую команду для загрузки в модели я спасший: model_to_load = h2o.loa

0зной

1ответ

Hadoop: Проблема с File Переписать

не в состоянии перекрыть файл на HDFS с командой ниже hadoop fs -put -f quicktechie.txt Employee Сообщение об ошибке говорит целевой файл уже существует. Что-то не так с моей командой?