想自己搞一个日志分析系统,各位 v 友有什么好的建议不

2016-03-02 09:06:29 +08:00
 realfreesky
4487 次点击
所在节点    程序员
18 条回复
xiamingchong
2016-03-02 09:07:46 +08:00
上 elk
noahzh
2016-03-02 09:08:20 +08:00
上 elk
lovelynn
2016-03-02 09:12:26 +08:00
什么日志,中间件日志某 60 的星图还是不错的。
dyingbleed
2016-03-02 09:30:49 +08:00
ElasticSearch + Logstash + Kibana
knightdf
2016-03-02 09:40:53 +08:00
有 logstash 好吗?
jy01264313
2016-03-02 09:46:31 +08:00
推荐看一下 google dapper ,开源的有 twitter 的 zipkin
yuankui
2016-03-02 09:48:19 +08:00
你想要怎么分析?
chinajik
2016-03-02 10:06:55 +08:00
面板推荐 grafana 这个适合生产线各种需求
HunterPan
2016-03-02 10:10:01 +08:00
flume+kafka+storm,听说 es 也很不错
lucifer4he
2016-03-02 10:23:06 +08:00
上 ELK + 1
tonyVex
2016-03-02 10:23:47 +08:00
flume+kafka+storm 这个常听说的。
hantsy
2016-03-02 12:22:21 +08:00
现在这种东西好多, LogEntries 等
hantsy
2016-03-02 12:22:58 +08:00
1. 收集有效的 LOG
2. 可视化分析结果
mofeiwo
2016-03-02 14:12:35 +08:00
如果量不大的话,可以 splunk
hienchu
2016-03-02 14:17:17 +08:00
ELK Stack 在用,比较成熟了,日志格式不复杂的话开发成本很低(主要是正则)
jings
2016-03-02 14:39:43 +08:00
正则 +1
匹配+不匹配+时间+支持并行查询
日志存储 日志压缩 日志备份这些也要考虑吧
crayhuang
2016-03-02 18:40:49 +08:00
@dyingbleed 一样 ElasticSearch + Logstash + Kibana + 1
gushan
2016-03-08 17:05:30 +08:00
可以考虑下阿里云日志服务。
1 )提供了简单接入客户端( https://yq.aliyun.com/articles/3228?spm=5176.team4.teamshow1.37.faH93Z
2 )日志收集到服务端后提供多种消费方式:数据通道(类 Kafka )/数据投递( ODPS 、 OSS-组合 E-MapReduce Spark )/实时搜索( https://help.aliyun.com/document_detail/sls/user-guide/overview.html

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/260393

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX