压缩Elasticsearch快照的最佳方法是什么?

时间:2015-11-27 07:57:03

标签: logging elasticsearch compression archive snapshot

我们的应用程序每天写入200 GB的大量日志。目前,我们的应用程序将日志写入共享存储上的纯文本文件这些文件使用zip压缩得非常好。

我们计划切换到Elasticsearch + Kibana。我们的测试表明,使用zip进行快照压缩只能缩小原始尺寸的一半。

压缩每日索引快照的最佳方法是什么?

1 个答案:

答案 0 :(得分:0)

在快照中,elasticsearch提供的compress参数仅适用于元数据文件(索引映射和设置)

对于纯文本文件压缩,您可以参考以下链接

https://superuser.com/questions/6912/highest-compression-for-filesfor-web-transfer http://www.howtogeek.com/200698/benchmarked-whats-the-best-file-compression-format/