V2EX 首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  程序员

维护了一个代理 IP 池,每三小时刷新一遍,基本能用,有需要的拿去~~

  •  
  •   pekingzcc · 91 天前 · 3142 次点击
    这是一个创建于 91 天前的主题,其中的信息可能已经有所发展或是发生改变。
    • 如题,代理 IP 池放到了七牛上,地址在这
    • 项目源码在这
    • 因为七牛 CDN 的问题,可能存在拉取下来的是之前的文件,可以参考这里 的第一种情况解决。
    • 不保证完全可用。
    23 回复  |  直到 2017-05-21 12:39:20 +08:00
        1
    metowolf   91 天前   ♥ 1
    建议对代理 IP 进行去重
        2
    pekingzcc   91 天前
    感谢提醒~~~
        3
    indexof   91 天前   ♥ 1
    建议 标记下是否高匿
        4
    pekingzcc   91 天前
    感谢建议,后续有时间会考虑加上~
        5
    Orzzzz   91 天前
    感谢
        6
    dd0754   91 天前
    楼主好人一生平安
        7
    WildCat   91 天前
    优秀!
        8
    wooyuntest   91 天前
    thx
        9
    lzhr   90 天前
    Python2 ?
        10
    gamecreating   90 天前
    不保证完全可用。

    尴尬
        11
    Reign   90 天前
    数量真的太少了,楼主能多爬点么,感谢
        12
    baixiangcpp   90 天前
        13
    pekingzcc   90 天前
    python 2.7,后续会多加点 IP 源~~~
        14
    whale   90 天前
    啧啧,看到一个相同头像的,大兄弟,你好!
        15
    zjp   90 天前 via Android
    楼主……你好像都没有成功回复到其他层主🤦
        16
    pekingzcc   90 天前
    @whale 你好啊,老铁~~
        17
    pekingzcc   90 天前
    @whale 你好啊,老铁~~
    @zjp 刚研究了一下,学会了,哈哈
        18
    pekingzcc   90 天前
    @gamecreating 因为毕竟公共代理,而且时效原因~~
        19
    F0nebula   90 天前
    感谢楼主~
        20
    BillowSky   90 天前 via iPhone
    make
        21
    bclerdx   89 天前
    这个怎么使用?
        22
    pekingzcc   89 天前
    @bclerdx 直接拿来用做代理 IP 爬数据就可以了啊
        23
    MIROKY   89 天前 via Android
    感谢分享
    DigitalOcean
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   鸣谢   ·   1318 人在线   最高记录 3541   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.7.5 · 60ms · UTC 16:15 · PVG 00:15 · LAX 09:15 · JFK 12:15
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1