flume

0зной

1ответ

Проблема при получении данных Twitter в HDFS с использованием Flume

Я пытаюсь получить данные twitter в HDFS, но получаю проблемы. Вот мой flume.conf файл TwitterAgent.sources= Twitter TwitterAgent.channels= MemChannel TwitterAgent.sinks=HDFS TwitterAgent.sources.T

hadoop twitter hdfs flume flume-twitter 2016-09-25

---

0зной

1ответ

настроить SSL в Apache Flume JMS 1.6.0

Я пытаюсь настроить SSL в Apache Flume JMS1.6.0. Как часть Apache Flume JMS Source не поддерживает SSL по своей природе. Включен ли любой, включив SSL в Apache Flume JMS1.6.0. Есть ли возможность напи

apache ssl flume 2016-09-27

---

0зной

1ответ

Интеграция потоковых потоков Spark Streaming

После многих изменений я все еще сталкиваюсь с проблемой привязки стандартного раковины Flume и Spark Stream к одному и тому же порту. Я использую Flume 1.6.0 и Spark 2.0.0. Используя руководство Inte

apache-spark spark-streaming flume 2016-09-28

---

1зной

2ответ

Apache Flume vs Apache Flink difference

Мне нужно прочитать поток данных из какого-то источника (в моем случае это поток UDP, но это не имеет значения), преобразуйте каждую запись и запишите ее в HDFS. Есть ли разница между использованием F

flume apache-flink flume-ng flink-streaming 2016-10-04

---

0зной

2ответ

Apache Flume занимает больше времени, чем copyFromLocal command

У меня есть 24-гигабайтная папка в локальной файловой системе. Моя задача - переместить эту папку в HDFS. Два пути я сделал это. 1) hdfs dfs -copyFromLocal/home/data// home/ Для этого потребовалось ок

hdfs flume flume-ng bigdata 2016-10-05

---