logstash 中 filter 是否可设置字典匹配?(类似 GeoIP)

2019-01-02 12:55:25 +08:00
 alwayslan
现有一个这样的需求,从日志中获取到访问的域名 /IP,想在 filter 中匹配出网站的类型和中文名称。
网站的类型和中文名称存储在一个数据库文件中,就和字典一样,有就增加网站类型和网站名称的字段,没有就置空。

例如,从日志中采集到访问网站的域名为:www.baidu.com ,则在 filter 中可设置匹配网站数据库,匹配到的结果为:网站类型:搜索类,网站名称:百度搜索,则在字段中增加“网站类型:搜索类,网站名称:百度搜索”的字段。

这个需求和 GeoIP 很像,从一个 IP 地址匹配出经纬度、地区等信息,也是基于一个数据库文件。
1329 次点击
所在节点    程序员
3 条回复
lishunan246
2019-01-02 14:53:34 +08:00
可以,需要自己实现一个插件
aaa5838769
2019-01-02 17:30:03 +08:00
我记得有一个 grok 插件,我不确定是不是这个插件,你可以看下。
alwayslan
2019-01-03 10:54:46 +08:00
grok 是正则匹配的

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/523067

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX