logstash 主要占用哪些资源

2021-10-31 16:10:15 +08:00
 swq1227

在处理大量日志时，是使用多个低配置的机器部署 logstash 好还是少量高配置的机器，为什么

2665 次点击
所在节点    Linux
9 条回复
PolarBears
2021-10-31 17:48:37 +08:00
如果不需要做复杂处理的话,有考虑过用 Beats 吗?
niubee1
2021-10-31 17:50:45 +08:00
确实很奇怪，我去提过 issuse ，反馈给我个方案，去改了几个操作系统配置解决了问题，不然启动的时候要等 10 几分钟才能启动起来开始工作
mengyx
2021-10-31 18:54:24 +08:00
@niubee1 #2 应该是等待下载 GeoIP 数据的原因，可以自行设置路径
swulling
2021-10-31 19:57:41 +08:00
内存
推荐少数几个大规格实例
xuanbg
2021-11-01 09:40:29 +08:00
我用 fluentd ，和日志源放同一台机器，es 集群是另外的机器，除了一点内部网络带宽，不占资源。
ElmerZhang
2021-11-01 10:38:28 +08:00
主要消耗内存和 CPU ，建议少量高配置机器
swq1227
2021-11-01 10:53:22 +08:00
@PolarBears 实际场景不复杂，在使用 filebeat ，这个问题是有次面试的时候被问到的
swq1227
2021-11-01 10:53:33 +08:00
@swulling 了解了
swq1227
2021-11-01 10:53:40 +08:00
@ElmerZhang 学到了

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/811901

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX