V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
preoge
V2EX  ›  问与答

对两千个网址进行抓包,有什么高效的方法吗?求指点

  •  
  •   preoge · 283 天前 · 944 次点击
    这是一个创建于 283 天前的主题,其中的信息可能已经有所发展或是发生改变。
    7 条回复    2023-07-26 17:59:33 +08:00
    fu4k
        1
    fu4k  
       283 天前
    高并发抓啊
    preoge
        2
    preoge  
    OP
       283 天前
    不太熟悉这个,大二,大创的任务
    x77
        3
    x77  
       283 天前
    Wireshark 抓网卡,不管两千个还是两万个都一样,反正都要走网卡,不过需要具备专业的网络方面的知识才能用起来
    X21541
        4
    X21541  
       283 天前
    对两千个网址抓包,这是普通人需要干的事情吗?
    jazzg62
        5
    jazzg62  
       283 天前
    两千个不算多吧,直接硬抓就可以
    jazzg62
        6
    jazzg62  
       283 天前
    爬虫一般会用多线程配合 ip 代理池来抓。
    多线程可以提高效率,代理池防反爬
    kpingdd
        7
    kpingdd  
       282 天前
    200 外包出去[doge]
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2454 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 31ms · UTC 08:38 · PVG 16:38 · LAX 01:38 · JFK 04:38
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.