怎么实时爬取网页数据

2020-05-07 19:29:35 +08:00
 t1thshy
怎么实时爬取一个网页的数据呢
1161 次点击
所在节点    问与答
5 条回复
kaifang
2020-05-07 19:31:50 +08:00
定时爬虫
leejaen
2020-05-07 19:54:26 +08:00
rss+iffft
t1thshy
2020-05-07 19:57:16 +08:00
@leejaen 网站没有 rss 咋办
kaiki
2020-05-07 19:58:50 +08:00
网页肯定不会主动通知你更新了啊，你只能自己周期的访问，自己来判断更新，更新了哪些，去爬哪些
mumbler
2020-05-07 19:59:56 +08:00
linux 下用 crontab，win 下用计划任务

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/669399

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX