python开发的敏感词检查代码有吗?

2013-05-18 10:01:15 +08:00
 wuxqing
一个小站,天天随机的被阻止,提示可能保护敏感信息。白天还好一些,到了晚上基本都是阻止的
想找个敏感词检查代码,把网站的页面查一边
7924 次点击
所在节点    Python
10 条回复
harmy
2013-05-18 10:33:31 +08:00
micyng
2013-05-18 11:00:12 +08:00
http://cooder.sinaapp.com/?p=81070 之前看到一兄弟用ac自动机写的,代码其实可以更精简 ;)
est
2013-05-18 11:00:17 +08:00
头痛医头么。。。。
wuxqing
2013-05-18 11:14:10 +08:00
@harmy 试了下
敏感词:开锁

内容:
我提供开×锁

还是过滤不了
harmy
2013-05-18 11:27:18 +08:00
@wuxqing 这当然屏蔽不了,关键字中间加干扰字符体现了网民对抗屏蔽的智慧和无奈
likuku
2013-05-18 12:39:22 +08:00
这个,因为没有统一的有关部门官方版词库,所以很难搞。大些的网站的确会有时被通知某些关键词需要过滤,但不会给到完整列表,只是有需求了才通知一次。
troycheng
2013-05-20 14:59:19 +08:00
@micyng 那是我在学校的时候写的,没什么经验,请多指教
troycheng
2013-05-20 15:01:10 +08:00
@wuxqing 这个得改造一下算法了,我见过这边有加入距离的方式计算的,搜搜相关的文献?
wuxqing
2013-05-20 19:39:17 +08:00
@troycheng 你挺厉害嘛
lchynn
306 天前
加符号屏蔽什么的不算啥, 你看过运营商过滤短信的哪个库,就知道多麻烦了。
简直就是各种火星文,同音字,同形字,甚至白字错字的大集成。
太佩服垃圾短信制造者了,把汉语缺字、倒序、错序、白字、仍然能正确读出主要语义的特点发挥了到了极点。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/69281

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX