V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
galileo1214
V2EX  ›  程序员

现在爬虫有什么推荐学习的?

  •  
  •   galileo1214 · 2020-04-27 14:25:15 +08:00 · 2053 次点击
    这是一个创建于 748 天前的主题,其中的信息可能已经有所发展或是发生改变。
    我看爬了自用还可以,有啥学习资料吗
    23 条回复    2020-04-30 15:37:28 +08:00
    Kmmoonlight
        1
    Kmmoonlight  
       2020-04-27 16:02:02 +08:00
    requests + beautifulsoup 一把梭
    galileo1214
        2
    galileo1214  
    OP
       2020-04-27 16:12:43 +08:00
    @Kmmoonlight 我去查查,谢了
    ziiber
        3
    ziiber  
       2020-04-27 16:56:38 +08:00
    从入门到入狱

    爬虫 没什么好学的吧
    stevenkang
        4
    stevenkang  
       2020-04-27 17:54:41 +08:00
    这算犯罪交流吗?
    Mac
        5
    Mac  
       2020-04-27 18:07:48 +08:00
    建议先学刑法
    EricCartmann
        6
    EricCartmann  
       2020-04-27 18:12:33 +08:00 via iPhone   ❤️ 1
    入门 requests+beautifulsoup4,进阶 scrapy 框架,遇到麻烦 selenium 一力降百技。
    Nich0la5
        7
    Nich0la5  
       2020-04-27 18:13:22 +08:00
    我比较喜欢的库有 httpx splash selenium bs
    CodingNaux
        8
    CodingNaux  
       2020-04-27 18:15:34 +08:00
    啥语言
    nodejs 一把梭,cheerio,puppeteer
    XxxxD
        9
    XxxxD  
       2020-04-27 18:21:01 +08:00 via Android
    JavaScript
    1358208301
        10
    1358208301  
       2020-04-27 18:34:57 +08:00 via Android
    刑法
    airqj
        11
    airqj  
       2020-04-28 01:53:23 +08:00 via Android
    先学学怎么绕开刑法
    mxx894
        12
    mxx894  
       2020-04-28 08:15:43 +08:00
    每次问这类问题总有人调侃 梗都玩烂了
    loginbygoogle
        13
    loginbygoogle  
       2020-04-28 08:39:43 +08:00 via iPhone
    Python 爬虫从入门到入狱
    galileo1214
        14
    galileo1214  
    OP
       2020-04-28 09:00:49 +08:00
    @stevenkang
    @Mac
    爬公开数据,哈哈
    或者爬了不公开
    galileo1214
        15
    galileo1214  
    OP
       2020-04-28 09:01:59 +08:00
    @EricCartmann
    感谢,刚看了楼上的 request + beautigulSoup 蛮好用的,已上手,下面搞搞 scrapy
    galileo1214
        16
    galileo1214  
    OP
       2020-04-28 09:02:47 +08:00
    @mxx894 哈哈,爬了公开了么就刑法走起了
    galileo1214
        17
    galileo1214  
    OP
       2020-04-28 09:06:36 +08:00
    @Nich0la5 谢谢分享
    galileo1214
        18
    galileo1214  
    OP
       2020-04-28 09:07:20 +08:00
    @XxxxD javascript 只会一点点和 html5 的内容,会 python,主要还是想在 python 上实现,谢了
    galileo1214
        19
    galileo1214  
    OP
       2020-04-28 09:07:42 +08:00
    @CodingNaux
    会 python,主要还是想在 python 上实现,谢了
    fansangg
        20
    fansangg  
       2020-04-28 09:43:35 +08:00
    数据库
    AllenBigBear
        21
    AllenBigBear  
       2020-04-28 10:50:47 +08:00
    刑法
    dxcqcv
        22
    dxcqcv  
       2020-04-28 11:52:25 +08:00
    @CodingNaux 学习
    XxxxD
        23
    XxxxD  
       2020-04-30 15:37:28 +08:00 via Android
    @galileo1214 JavaScript 是应对后期页面数据加密的情况
    关于   ·   帮助文档   ·   API   ·   FAQ   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   3998 人在线   最高记录 5497   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 37ms · UTC 05:56 · PVG 13:56 · LAX 22:56 · JFK 01:56
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.