看了大多数爬虫,都是 java 的。
现在需求时,希望能在本地运行的。最好是 Mac ,不行就 win ,再不行就 php 吧
直接把 h tml 全部 down 下来就行。自动按照正则去爬
看了大多数爬虫,都是 java 的。
现在需求时,希望能在本地运行的。最好是 Mac ,不行就 win ,再不行就 php 吧
直接把 h tml 全部 down 下来就行。自动按照正则去爬
|
13348859836Apr 27, 2016
1
python 的爬虫框架多 随便找一个吧
|
|
zhouxuchenApr 27, 2016
2
life is short, you need pyquery
|
|
xiamxApr 27, 2016
3
html is context free grammar btw
|
|
jnduanApr 27, 2016
4
java 的就不能本地运行了?
那你用 Offline Explorer 吧 |
|
sadhenApr 27, 2016
5
不太理解楼主的需求
貌似是把 HTML 全部下载到本地后,再在没有网络环境的情况下抓取信息 是么? 还是普通的爬虫框架? |
|
6
|
|
cxbigApr 27, 2016
7
php/ruby/python 随便哪个语言都可以,手写一个百来行。
|
|
SCaffreyApr 27, 2016
8
nodejs/python
|
|
TinkApr 27, 2016
9
这个貌似叫离线浏览器?
|
|
wmhxApr 27, 2016
10
wget 啊, 一丢丢的
|
|
qq839994901Apr 27, 2016
11
scrapy
|
|
OuyanganApr 27, 2016
12
java 不能本地么......
|
|
breakApr 27, 2016 via iPhone
13
都是 html 的话, wget 就可以了, wget 的镜像复制命令
|
|
imn1Apr 27, 2016
14
爬虫很多,能用正则的不多
|