关于爬虫爬回来的数据用什么方式最好和主站保持同步呢？

2013-08-19 00:03:30 +08:00
 tedd
譬如我将海dao湾的链接爬回来，要怎么才能做到和它保持爬后的更新呢？实时监控最新添加的信息？
1989 次点击
所在节点    问与答
1 条回复
yangqi
2013-08-19 01:17:42 +08:00
海到弯的连接很少更新吧

就不停的爬，遇到已有的就更新就行了吧

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/79472

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX