如何屏蔽网站被恶意搜索请求？

2018-05-19 10:53:25 +08:00
 zqjilove

刚刚建了一个工具站（本身也是抓取三方数据），但是就有人直接构造 URL，用代理不断访问搜索页面，导致站点不断啊抓取第三方数据，直接被限制了。有什么办法可以比较方便的解决这种恶意搜索请求呢？

3419 次点击
所在节点    站长
5 条回复
serical
2018-05-19 11:07:14 +08:00
你抓了先缓存起来，解决了被限制的问题，再来斗智斗勇😏
m939594960
2018-05-19 12:33:33 +08:00
限制同 IP 的搜索频率
golmic
2018-05-19 12:52:37 +08:00
人家能用代理你也用
m939594960
2018-05-19 12:56:00 +08:00
限制同 IP 的搜索频率，或者注册后才能搜索，或者到达某个数量后开启验证码
jssyxzy
2018-05-20 16:10:00 +08:00
百度下"范爬虫"

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/456094

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX