请问如何抓取知乎专栏？

[qmqy]

我并不打算盗用文章，只是想做成rss供自己阅读，不打算大范围传播.....
知乎专栏用了ajax技术，市面上的采集工具都试过，不好使...
请大神指教！

[ttph1oc]

方案1 PhantomJS
方案2 打开控制台看看知乎专栏的API，抓取和处理http://zhuanlan.zhihu.com/api/columns/xxx/posts、http://zhuanlan.zhihu.com/api/columns/xxx/posts/xxx这类的东西等等

[PotatoBrother]

这是 @faceair 大大写的知乎日报网页版： http://www.zhihudaily.net，源代码在这 https://github.com/faceair/zhihudaily

还有@RIcter 大大自制的的 RSS 源： http://www.ricter.me/articles/153

[PotatoBrother]

连接没发好，楼主见谅

[PotatoBrother]

连接->链接

[airyland]

@PotatoBrother 楼主是问 专栏 不是 日报 吧。

[PotatoBrother]

@airyland http://www.zhihudaily.net/sections 这里面有专栏，楼主也可以去看看源代码的实现

[PotatoBrother]

@airyland 好吧我看错了......是专栏不是专题

[PotatoBrother]

最近老是看错主楼的要求，常常回答一些不相干的东西，罪过罪过
以后可要认真审题

[TangMonk]

windows的话弄个 fiddler 来抓取数据呗。（mac 上貌似没有比这货还好用的）

[airyland]

看请求就知道了：
先取列表：
http://zhuanlan.zhihu.com/api/columns/zhuxuanzhihu/posts
根据id列表取文章：
http://zhuanlan.zhihu.com/api/columns/zhuxuanzhihu/posts/19796528

[zhxhwyzh14]

有一个软件叫做知乎助手

[zhxhwyzh14]

知乎助手： http://www.llaxblog.com/archives/63

[messagebus]

写过知乎专栏RSS http://miantiao.me/zhihuzhuanlan-rss.html

[qmqy]

@ttph1oc
非常感谢！不过我毕竟不是程序员，第二个方案时间成本有些高，第一个方案PhantomJS确实是个神器（同时发现了另一个神器CasperJS ），google了一大堆文档，自己也写了相关js，抓是抓到了文章，但是考虑到还要避免文章重复、文章远程发布、contab定时任务、图片保存等等问题......算了，这不是我的专长T_T......

[no13bus]

@qmqy 你都知道这些概念了。百度下就行了

[qmqy]

@PotatoBrother
无论如何，谢谢你啦~13楼给出了解决方案。

@zhxhwyzh14
谢谢！这个软件真是意外收获~

@ccbikai
Wow！早知道你写好了我就不用费那么大劲折腾了T_T........请问你的服务会一直开下去吗？推广开后可以考虑适当收费啊~

[qmqy]

@no13bus
行，最近忙着找工作，等时间稳定了再研究研究。谢谢了！

[PotatoBrother]

@qmqy 我是添乱的😢

[messagebus]

@qmqy 不敢保证一直，不过尽量会坚持下去

[qmqy]

@ccbikai
请问下，你有接口调用这方面的教程呢？我看了一下你给的api地址，一大坨东西，关是概念就很难理解....或者能说一下你调用的过程吗？谢谢！

[messagebus]

@qmqy 没有教程。API返回的是JSON格式的数据，你先了解下 JSON

[qmqy]

@ccbikai
好的，谢谢！