本人会一点程序基础但不是程序员,心血来潮想学python爬虫,除了需要你技术ok,还需要你有耐心.就这些,请加qq18357601
1
ufo22940268 Jun 25, 2013
http://www.crummy.com/software/BeautifulSoup/bs4/doc/
我刚刚用这个做了一个爬虫系统,感觉良好 |
2
bravejoe Jun 25, 2013
可以看下这个python的开源爬虫框架 http://scrapy.org/
|
3
xieren58 Jun 25, 2013
用node.js啦,异步,处理html可以用jquery。~~~~~~
|
5
gullon Jun 25, 2013
@ufo22940268
Beautiful是用来解析网页的。。。怎么可以说用bs4做了个爬虫系统呢 |
6
ufo22940268 Jun 25, 2013
@gullon 我理解错了
|
9
acpp Jun 25, 2013
@ufo22940268 能说下你说的那个效率怎么样吗
|
10
seraphimhj Jun 25, 2013
nodeJS,以前用node.io写过一个爬房价的工具
|
11
ufo22940268 Jun 25, 2013 via iPhone
@acpp 我只是觉得用起来顺手,开发快,还有我可能理解错了爬虫的意义了
|
12
duhastmich Jun 26, 2013
|
13
duhastmich Jun 26, 2013
@Ricepig 爬虫不异步或者多线程那效率也太低了吧。。
|
14
gullon Jun 26, 2013
|