写了一个 金句 的开源爬虫

2020-06-07 12:27:03 +08:00
 zhaoolee

每次打开一言网页,会自动刷出一句话,并注名出处

作为一个重度收集爱好者,我写了一个爬虫,将所有句子展示到一张网页上,随时查看

https://www.v2fy.com/yiyan_spider/yiyan.html

https://www.v2fy.com/yiyan_spider/yy.html

开源地址:

https://github.com/zhaoolee/yiyan_spider

详细说明:

https://mp.weixin.qq.com/s/iBtdelKugQtfsHZyjOw0ig

2511 次点击
所在节点    分享发现
7 条回复
constexpr
2020-06-07 12:42:35 +08:00
我要看毒金句
zhaoolee
2020-06-07 13:10:10 +08:00
@constexpr 你这人有毒,哈哈
ddup
2020-06-07 14:29:00 +08:00
@constexpr #1 哈哈哈
fgwmlhdkkkw
2020-06-07 15:03:13 +08:00
这就是为什么爬虫要喝茶了。为什么要这么做呢?
zhaoolee
2020-06-08 07:09:52 +08:00
@fgwmlhdkkkw 里面网友们提交的金句非常棒, 想看更多的金句,这个爬取速度非常慢,平均 8 秒钟才发起一次 GET 请求,不会对服务端造成什么负担
wang247
2020-06-08 16:11:22 +08:00
这里建议加个全文搜索呢亲
zhaoolee
2020-06-09 10:06:50 +08:00
@wang247 使用这个地址 https://www.v2fy.com/yiyan_spider/yiyan.html , 然后 ctrl+f

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/679386

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX