首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  程序员

有人用 Java 写爬虫吗?

  •  
  •   wz497345846 · 36 天前 · 1623 次点击
    这是一个创建于 36 天前的主题,其中的信息可能已经有所发展或是发生改变。
    11 回复  |  直到 2019-06-11 21:39:39 +08:00
        1
    calming   36 天前
    httpclient+jsoup 呗
        2
    leon0903   36 天前
    我记得好像有好几个 java 爬虫框架
        3
    shionri   36 天前 via Android
    用过 selenium java,写爬虫的话有点大材小用的感觉?
        4
    fenrao   36 天前
    webmagic
        5
    jiom   36 天前
    一楼的方案是最常用的了
        6
    tikazyq   36 天前
    可以尝试一下爬虫管理平台 Crawlab,支持任何语言、任何框架,可以用 Crawlab 集成你的 Java 爬虫

    https://github.com/tikazyq/crawlab
        7
    c4f36e5766583218   36 天前
    retrofit 接 api 爬。
        9
    bigbigeggs   36 天前
    写过好多。跟 python 没什么区别。就是拿到数据,然后清洗数据。
    python:request + (bs4,re 等)
    java: httpclent + (jsoup,re 等)
        10
    brucefu   36 天前
    去哪儿爬信息百分之 95 的 java
        11
    luozic   36 天前 via iPhone
    apache 组织有开源的爬虫和抽取数据框架,java 语言的
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   872 人在线   最高记录 5043   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 21ms · UTC 21:13 · PVG 05:13 · LAX 14:13 · JFK 17:13
    ♥ Do have faith in what you're doing.