可能是市面上唯一的开源代理 IP 数据库

3 月 16 日
 nc

三个月前做了个免费开源的代理检测数据库,起因是自己的项目需要注册风控,没找到免费的离线数据库。CSV 格式的数据: https://github.com/NetworkCats/OpenProxyDB GitHub Actions 每天自动更新

与其它地理定位库结合的 MMDB 格式: https://github.com/NetworkCats/Merged-IP-Data 生产环境的话推荐用 MMDB ,完全是内存中查询的。

可以在这里在线查询数据库中的内容:ip.nc.gy 这个网站也是开源的,https://github.com/NetworkCats/rustyip

数据库覆盖 IPv4 和 IPv6 ,准确度的话,对比 IPinfo 的代理检测库准确度是不相上下的,这个是我自己做的测试,由于版权原因不能分发测试结果,有其它商业库访问权限的人可以自己做对比测试。这个库对住宅代理也是能检测到的,至少我自己在用的多个住宅代理是被标记的。

数据库都是 CC0 ,随便在商业项目用。但是如果你用在 IP 查询网站上,然后网站有广告的话,最好还是链接到项目仓库,这样能有更多人知道这个免费数据库。

3076 次点击
所在节点    分享创造
12 条回复
wsliwh
3 月 16 日
感谢大佬分享
org100
3 月 16 日
谢谢分享
ala2008
3 月 16 日
对我来说,能到街道级别才有点用 👍
nc
3 月 16 日
@ala2008 不是地理库,是风控库,用来检测 IP 是不是代理的。街道级别的库都是国内的,从 APP/广告商买的 GPS 数据,非常准。国外的库没有这么精确的,因为有 GDPR ,据我所知 IPinfo 的地理定位基本全部依靠延迟定位,类似基站三角定位。
ala2008
3 月 16 日
@nc 好的学到了
nc
3 月 16 日
另外,releases 那里自动生成的 IP 统计信息,显示的是未展开的 CIDR 的数量,不是独立 IP 的数量。
codeface
3 月 16 日
有意思,没想到 wikipedia 会把 block 的 ip 数据开放出来
guanhui07
3 月 16 日
谢谢分享
nc
3 月 16 日
@codeface wiki 还是非常开放的,封禁列表都是有 API 可以查询。而且数据质量还很好,他们有 Bot 自动扫开放代理,并且有用商业的数据库,比如 spur ,算是跟着白嫖数据了。
woodchen
3 月 16 日
谢谢分享, 我有一个免费自用的 IP 查询站, 可以把你的服务作为查询源之一吗?
nc
3 月 16 日
@woodchen 随便用,在页脚添加个 github 仓库链接就行
woodchen
3 月 16 日
@nc #11 好的

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1198523

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX