flume

0зной

1ответ

создание желобе агента в Hortonworks песочнице VM для потоковой передачи данных о погоде в HDFS

Я конфигурирование желоба для потоковой передачи данных о погоде, я написал желобе агент, как указано ниже, WeatherAgent.sources = Погода WeatherAgent. раковины = HDFS-запись WeatherAgent.channels = п

2зной

1ответ

Получение «проверки flume.conf для изменений» в цикле

Я использую Apache Flume 1.4.0 для сбора файлов журнала (auth.log) и хранения в HDFS (Hadoop 2.6.0). Используется команда: bin/flume-ng agent --conf ./conf/ -f flume.conf -Dflume.root.logger=DEBUG,con

0зной

1ответ

Настройка потока с Oracle AQ

У меня есть вопрос о настройке Apache Flume с помощью Oracle AQ с использованием JMS. Чтобы установить JMS между Oracle AQ и удаленным сервером (например, Flume), мне нужно настроить WebLogic datasour

0зной

1ответ

Apache Spark Streaming и интеграция пакетов Apache

Я пытаюсь интегрировать Apache Spark Streaming и Apache Flume, следуя this guide. Я пытаюсь установить это в песочнице MapR. Когда я отправлю пример: JavaFlumeEventCount, все работает нормально, и оно

0зной

1ответ

Что означает агент agent.sources.tailSrc.command?

Я изучаю flume.While я пытаюсь прочитать файл журнала из моей системы. Я использовал следующий код .. загружался из Интернета. agent.sources = tailSrc agent.channels = memoryChannel agent.sinks = hd

0зной

2ответ

Создание файла в HDFS, но не добавление какого-либо содержимого

Я использую HTTP-источник для размещения файлов JSON в HDFS (Single SANDBOX). Файл создан в правильной директории, однако в файл ничего не добавлено. Не могли бы вы проверить мой flume.conf, прежде че

1зной

1ответ

Подзапись в Avro с Morphlines

Я пытаюсь преобразовать JSON в Avro, используя модуль морфинга kite-sdk. После игры я могу преобразовать JSON в Avro, используя простую схему (без сложных типов данных). Затем я сделал еще один шаг и