1. дома
  2. Вопрос и ответ
  3. NiFi генерирует огромный файл журнала - непрерывно регистрируется - задача выполнения контроллера потока отменена

NiFi генерирует огромный файл журнала - непрерывно регистрируется - задача выполнения контроллера потока отменена

2016-08-04 2 views
1

Мой экземпляр Nifi яростно генерирует огромное количество одного и того же журнала снова и снова. Мой поток состоит из ExecuteStreamCommand, который внутренне вызывает Java-эксплоитную банку. Кроме того, посмотрите на пользовательский интерфейс NiFi, этот процессор, похоже, застрял в 1 активной теме. Даже когда я перезапускаю NiFi, кажется, что это состояние сохраняется, и это продолжается. Как вы можете видеть ниже, он регистрирует тысячи строк одного журнала за секунду. Псих!NiFi генерирует огромный файл журнала - непрерывно регистрируется - задача выполнения контроллера потока отменена

016-08-03 17:21:12,904 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]3fe940f' has been cancelled. 
2016-08-03 17:21:12,904 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]5c02799' has been cancelled. 
2016-08-03 17:21:12,915 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]52871b90' has been cancelled. 
2016-08-03 17:21:12,915 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]5c488f85' has been cancelled. 
2016-08-03 17:21:12,915 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]2be136ef' has been cancelled. 
2016-08-03 17:21:12,915 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]2f1930e5' has been cancelled. 
2016-08-03 17:21:12,915 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]4528e50d' has been cancelled. 
2016-08-03 17:21:12,915 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]5d046e8a' has been cancelled. 
2016-08-03 17:21:12,915 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]7ff06d8b' has been cancelled. 
2016-08-03 17:21:12,915 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]1908e488' has been cancelled. 
2016-08-03 17:21:12,915 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]1b8a6a29' has been cancelled. 
2016-08-03 17:21:12,915 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]650437ec' has been cancelled. 
2016-08-03 17:21:12,926 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]196492f2' has been cancelled. 
2016-08-03 17:21:12,926 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]471609f2' has been cancelled. 
2016-08-03 17:21:12,926 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]f05e81b' has been cancelled. 
2016-08-03 17:21:12,926 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]4bfa0540' has been cancelled. 
2016-08-03 17:21:12,926 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]76b4fdcf' has been cancelled. 
2016-08-03 17:21:12,926 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]19a2372' has been cancelled. 
2016-08-03 17:21:12,926 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]21ff466a' has been cancelled. 
2016-08-03 17:21:12,926 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]3ab48710' has been cancelled. 
2016-08-03 17:21:12,926 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]6bbf5f0c' has been cancelled. 
2016-08-03 17:21:12,926 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]3b6e60ba' has been cancelled. 
2016-08-03 17:21:13,131 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]60f9bdab' has been cancelled. 
2016-08-03 17:21:13,131 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]7eeb3aa3' has been cancelled. 
2016-08-03 17:21:13,131 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]6f3d5d4d' has been cancelled. 
2016-08-03 17:21:13,131 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]271e8ba0' has been cancelled. 
2016-08-03 17:21:13,131 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]aa77e0d' has been cancelled. 
2016-08-03 17:21:13,132 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]2d3e73d8' has been cancelled. 
2016-08-03 17:21:13,132 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]286c9407' has been cancelled. 
2016-08-03 17:21:13,132 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]7bfc4921' has been cancelled. 
2016-08-03 17:21:13,132 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]4a1a0745' has been cancelled. 
2016-08-03 17:21:13,132 DEBUG [Timer-Driven Process Thread-3] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]14640d6d' has been cancelled. 
2016-08-03 17:21:13,142 DEBUG [Timer-Driven Process Thread-5] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]58646f4a' has been cancelled. 
2016-08-03 17:21:13,142 DEBUG [Timer-Driven Process Thread-5] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]41488026' has been cancelled. 
2016-08-03 17:21:13,142 DEBUG [Timer-Driven Process Thread-5] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]5b728765' has been cancelled. 
2016-08-03 17:21:13,142 DEBUG [Timer-Driven Process Thread-5] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]6f49e603' has been cancelled. 
2016-08-03 17:21:13,142 DEBUG [Timer-Driven Process Thread-5] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]14acca9f' has been cancelled. 
2016-08-03 17:21:13,142 DEBUG [Timer-Driven Process Thread-5] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]11e0219c' has been cancelled. 
2016-08-03 17:21:13,142 DEBUG [Timer-Driven Process Thread-5] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]5e66d56a' has been cancelled. 
2016-08-03 17:21:13,142 DEBUG [Timer-Driven Process Thread-5] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]7e3f595b' has been cancelled. 
2016-08-03 17:21:13,142 DEBUG [Timer-Driven Process Thread-5] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]c359c31' has been cancelled. 
2016-08-03 17:21:13,142 DEBUG [Timer-Driven Process Thread-5] org.apache.nifi.engine.FlowEngine A flow controller execution task 'java.[email protected]1c49a0ea' has been cancelled.

источник

2016-08-04 abhishek mishra

+0

Вы включили ведение журнала отладки? Похоже, org.apache.nifi регистрируется на уровне отладки, что объясняет, почему вы видите так много журналов. По умолчанию файл logback.xml поставляется с журналами NiFi на уровне INFO. –

+0

Вот и все. Я должен был быть более ясным с этим вопросом. Почему Nifi регистрирует это заявление так яростно? Это потому, что мои процессоры отмечены значением расписания 0, поэтому он запускает и отменяет задачу каждые несколько миллисекунд? Похоже, что он должен что-то сделать с помощью свойства nifi nifi.bored.yield.duration = xx. Я изменю его на более высокое значение и проверит. Кстати, как я могу отметить ответ? Не видите вариант. –

+0

Я напишу это как ответ, а не комментарий, чтобы вы могли отметить/проголосовать ... –

ответ

2

Похоже org.apache.nifi регистрирует на уровне отладки, который бы объяснить, почему вы видите так много журналов. По умолчанию файл logback.xml поставляется с журналами NiFi на уровне INFO.

FlowEngine - это исполнитель потока потока, который выполняет все задачи для потока, а оператор ведения журнала, который вы видите, происходит при проверке результата завершения задачи. Вы правы, что когда процессор выполняет расписание на 0 секунд, он выполняется как можно быстрее, что выполняет множество задач. Я не совсем уверен, почему так много заданий отчитываются как отмененные или обычные.

источник

2016-08-04 22:52:56

 Смежные вопросы

  • Нет связанных вопросов^_^