请教一下大神们，日志是怎么处理的？

[deweixu]

我们之前对日志的处理是，每天会有一个定时任务处理头一天的日志，会选择一个关键的日志入库，然后可以下载，导出成 excel 之类的，但是随着日志数据量的巨增，发现入库不是一个好的选择，大神们是怎么弄的呢？

[957204459]

ELK

[cls1991]

elk

[deweixu]

@957204459 Elasticsearch 是不是还要把从 logstash 得到的数据存储起来？

[zen9073]

@deweixu
logstash 收集 log，发送到 elasticsearch 存储，然后通过 kibana 处理展示，

[roricon]

在 logstash parse log file 的时候加 filter 可以过滤掉你不关心的 log entries

[iugo]

之前想过用 Kafka + 自定义处理, 但前一段将日志移入某云. 然后只针对严重的错误进行提醒.

[qqmishi]

或者试试 loggly 这种日志服务

[rooftop64]

试试 Graylog