又双叒叕是一个爬虫: sprite-nest

2019-10-12 20:00:15 +08:00
 yrq110

GitHub: sprite-nest

轻松灵活地从网络上爬取指定类型内容的数据, ~~为了练习 ts 与 puppeteer~~

基本想法是:对某一类型数据设计统一的结构(这里的类型不是文件格式),当爬取同类不同种的数据时方便管理:如翻译器(谷歌翻译、百度翻译等)、搜索引擎(谷歌、百度、duckduckgo 等)、口红(armani,ysl,dior 等)、社交平台(微博等)。

特性

1789 次点击
所在节点    分享创造
0 条回复

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/608743

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX