2015-11-27 4 views
0

Наши приложения пишут множество журналов, таких как 200 ГБ в день. В настоящее время наши приложения записывают журналы в текстовые файлы на общем хранилище. И эти файлы сжимаются очень хорошо, используя zip.Каков наилучший способ сжать снимки Elasticsearch?

Мы планируем перейти на Elasticsearch + Kibana. И наши тесты показали, что сжатие моментальных снимков с использованием zip уменьшает его только на половину исходного размера.

Каков наилучший способ сжатия ежедневного моментального снимка индекса?

ответ

0

В моментальной elasticsearch обеспечивает компресс параметр, который применяется только к файлам метаданных (отображение индекса и настроек)

Для простого сжатия текстового файла, Вы можете обратиться по следующим ссылкам,

https://superuser.com/questions/6912/highest-compression-for-filesfor-web-transfer http://www.howtogeek.com/200698/benchmarked-whats-the-best-file-compression-format/

+0

Я не уверен, как это полезно. Вопрос OPs - как мы можем сжимать данные, которые копируются с помощью моментального снимка. Это контролируется ES. Как мы можем контролировать резервное копирование данных (а не метаданных) во время моментального снимка? – animageofmine