Какое использование раздела kafka отличается от повышения эффективности посредством параллелизма?

Question

Я использую Кафку для сбора логов, Есть ли другие преимущества раздела, как мы можем использовать его в дальнейшем для упрощения обработки наших журналов, если мы будем использовать раздел в теме,

Partition увеличивает параллелизм, то есть одно преимущество использования раздела в теме кафки.

Answer 1

Всегда лучше иметь разделы для темы, чтобы повысить эффективность, а также распространять данные на нескольких дисках и узлах.

Я не думаю, что создание нескольких разделов для темы будет проблемой для вашей обработки, потому что KAFKA отвечает за обработку внутренней логики наличия нескольких разделов, которые вам нужны только для получения информации о теме.

Наличие нескольких разделов увеличит вашу пропускную способность и уменьшит задержку.