Python 爬虫有哪些写的比较好的项目

2018-09-10 22:11:17 +08:00
 HarryQu
最近在学 python3 爬虫 ,希望大家能介绍点好的资料,少走点弯路。
我不在乎项目的大小,但是有两点要求 :
1. 规范的代码 : 命名、写法 、项目结构划分等。 (最重要)
2. 较好的文档 : 中文或英文都可以,代码质量高的话 , 没有也没关系。
github 项目或者书籍都可以,但是希望不要太老。
如果大家知道的话,请告诉我下, 我需要的是一个方向,谢谢 !
4337 次点击
所在节点    Python
11 条回复
qq976739120
2018-09-10 23:49:08 +08:00
requests 库
yijianlishi
2018-09-11 08:31:31 +08:00
mark 一下,同求
irain
2018-09-11 08:38:26 +08:00
scrapy
tzhhahaha
2018-09-11 09:15:11 +08:00
pyspider ?是一个国人(华裔?)运营的带 GUI 的爬虫框架,但是那天我看好像官网打不开了。。。不过不影响使用
HarryQu
2018-09-11 09:18:39 +08:00
@tzhhahaha thanks
ShiyanlouCleaner
2018-09-11 09:40:23 +08:00
给你推荐实验楼的 Python 实战吧,很多有趣的项目。而且完美符合你的两点要求

https://www.shiyanlou.com/courses/?category=all&course_type=all&fee=all&tag=Python&unfold=0
mimzy
2018-09-11 09:48:52 +08:00
piaoyun
2018-09-11 09:51:02 +08:00
mark 一下,同求
ddzzhen
2018-09-11 11:37:11 +08:00
pyspider 挺好的,但是反扒方面需要自己研究增进
xuegj1010
2018-09-11 18:10:21 +08:00
慕课网
HarryQu
2018-09-11 20:44:27 +08:00
@mimzy 这本书挺不错的 ! 谢谢 ! python 网络数据采集

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/488009

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX