flume

0зной

2ответ

Я очень новый для больших объемов данных, и у меня немного путаницы относительно Sqoop и Flume Так я получаю эту разницу между Sqoop и Flume Sqoop для передачи массивов данных от РСУБД Flume для поток

0зной

1ответ

Лучший способ импортировать CSV-файл 20GB в Hadoop

У меня есть огромный 20-гигабайтный CSV-файл для копирования в Hadoop/HDFS. Конечно, мне нужно управлять любыми ошибками (если сервер или приложение передачи/загрузки сбой). В таком случае мне нужно п

0зной

1ответ

Как создать справочник spoolind как раковина в флюме

Я знаю, как создать каталог спула как источник в лотке. Я использую spool directory для копирования файлов из папки в hdfs sink. Есть ли способ, которым я могу создать каталог спула как раковину, чтоб

0зной

1ответ

Конфигурация дымохода не работает, показывая исключение

У меня есть дополнительная конфигурация дымохода. Я пытаюсь передать файл размером 9 ГБ в hdfs, используя flume из каталога спула. У меня есть следующая конфигурация лотка. #initialize agent's source,

0зной

1ответ

flume все еще сохраняет файл .tmp и не полностью копирует файл в HDFS

Привет, я использую flume для копирования файлов из каталога спулинга в HDFS с использованием файла в качестве канала. #Component names a1.sources = src a1.channels = c1 a1.sinks = k1 #Source det