请问有没有这样的爬虫代码范例

[saximi]

实现爬虫功能的同时，也进行了以下处理：
1、修改了 HTTP 请求头，每次爬取时随机选择一个使用
2、将真实 IP 地址进行了屏蔽，每次爬取时从 IP 池中选择一个使用
3、初始访问页面是第一页，根据页面上的选择页控件，爬完当前页后接着爬取下一页直至全部爬取完毕
4、爬取的数据存储到数据库
5、最好能用到 PhantomJS 这个浏览器——这个条件不强求，但是有的话最好

请问有满足上述条件的爬虫代码范例可供学习么？
非常感谢！

[saximi]

@toono 太奇怪了，您爬虫主页是 https: //www.douban.com/group/explore，我无论是用 IE 还是 CHROME 浏览器访问这个页面，打开页面源码后都找不到“ topic-content ”这个字符串呢。
我用 FIDDLER 工具查看访问 https: //www.douban.com/group/explore 时的报文，点击 COOKIE 按钮时提示并无 COOKIE，是在不明白。

[toono]

@saximi topic-content 是在帖子里面的，https: //www.douban.com/group/explore 是帖子列表。