V2EX 首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  程序员

维护了一个代理 IP 池,每三小时刷新一遍,基本能用,有需要的拿去~~

  •  
  •   pekingzcc · 38 天前 · 2929 次点击
    这是一个创建于 38 天前的主题,其中的信息可能已经有所发展或是发生改变。
    • 如题,代理 IP 池放到了七牛上,地址在这
    • 项目源码在这
    • 因为七牛 CDN 的问题,可能存在拉取下来的是之前的文件,可以参考这里 的第一种情况解决。
    • 不保证完全可用。
    23 回复  |  直到 2017-05-21 12:39:20 +08:00
        1
    metowolf   38 天前   ♥ 1
    建议对代理 IP 进行去重
        2
    pekingzcc   38 天前
    感谢提醒~~~
        3
    indexof   38 天前   ♥ 1
    建议 标记下是否高匿
        4
    pekingzcc   38 天前
    感谢建议,后续有时间会考虑加上~
        5
    Orzzzz   38 天前
    感谢
        6
    dd0754   38 天前
    楼主好人一生平安
        7
    WildCat   38 天前
    优秀!
        8
    wooyuntest   38 天前
    thx
        9
    lzhr   38 天前
    Python2 ?
        10
    gamecreating   38 天前
    不保证完全可用。

    尴尬
        11
    Reign   37 天前
    数量真的太少了,楼主能多爬点么,感谢
        12
    baixiangcpp   37 天前
        13
    pekingzcc   37 天前
    python 2.7,后续会多加点 IP 源~~~
        14
    whale   37 天前
    啧啧,看到一个相同头像的,大兄弟,你好!
        15
    zjp   37 天前 via Android
    楼主……你好像都没有成功回复到其他层主🤦
        16
    pekingzcc   37 天前
    @whale 你好啊,老铁~~
        17
    pekingzcc   37 天前
    @whale 你好啊,老铁~~
    @zjp 刚研究了一下,学会了,哈哈
        18
    pekingzcc   37 天前
    @gamecreating 因为毕竟公共代理,而且时效原因~~
        19
    F0nebula   37 天前
    感谢楼主~
        20
    BillowSky   37 天前 via iPhone
    make
        21
    bclerdx   37 天前
    这个怎么使用?
        22
    pekingzcc   36 天前
    @bclerdx 直接拿来用做代理 IP 爬数据就可以了啊
        23
    MIROKY   36 天前 via Android
    感谢分享
    DigitalOcean
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   鸣谢   ·   1160 人在线   最高记录 2607   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.7.5 · 53ms · UTC 00:13 · PVG 08:13 · LAX 17:13 · JFK 20:13
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1