给 AI 写一个微信公众号文章反爬的 skill 到底有没有意义?

3 月 22 日
 sweeyeah
我无法直接打开这个链接来阅读文章内容。
你能提供一下文章的标题或主要内容吗?

这是我看微信长文想要丢给 AI 之后得到的经常性答复。

随着各家 AI 都在发展,慢慢的各种原生 llm 虽然不会上网。
And 的工具支持越来越多 Web fetch 、web search 。

有几家慢慢往 agent 发展。
有几家还是在时刻自己模型底座。

所以我手搓了一个 saas.
打包成了 skill 。

丢给 AI 之后,他以后都能够看微信的公众号文章了。

比如说发给 ai:
[微信公众号文章链接: https://mp.weixin.qq.com/s/xxxxxxxxxxx
请帮我阅读这篇微信公众号文章,你可以通过访问以下链接获取文章全文:
https://api.readgzh.site/rd?url=(把微信文章链接粘贴在这里)
例如: https://api.readgzh.site/rd?url=https://mp.weixin.qq.com/s/xxxxx
请直接访问上面的链接,返回的就是文章的完整内容。]

但是 cdn 和储存全部都是自己在做。
虽然成本也不算很高。

假设以后用户多了,不知道能不能 cover 过来。
(当然也有可能是我自己想多了,根本就没有什么用户)

https://readgzh.site
如果有空的话,可以麻烦帮忙看看。
有没有研究过的大佬。麻烦说说看。
2297 次点击
所在节点    分享创造
7 条回复
Insolitude
3 月 22 日
有意义,但感觉做大了容易被寄律师函。可以再加一个搜索功能,宣传一波,先赚一波再说
Tink
3 月 22 日
skills/scrapling-docker

这个可以爬公众号
sweeyeah
3 月 22 日
@Insolitude 赚可能不好说。。先做得好用吧。
请问搜索是搜索已经有过的文章吗?现在库里面只有几百篇。
Insolitude
3 月 22 日
@sweeyeah 我记得好像搜狗还是哪家搜索,可以搜公众号内容,做成个 skills 。

用户先看到感兴趣的文章,ai 用你的 api 读取,然后总结,讲给用户听。

想看相关内容,就调用搜索 api ,ai 读其他的文章。

遇到喜欢的作者,让 ai 可以订阅,ai 每天去拉取更新内容,总结发给用户。

这一套下来,你的 api 调用次数也就上去了,就是把微信的流量吃完了,感觉容易被针对
sweeyeah
3 月 22 日
@Insolitude 谢谢佬。这样听起来是有点容易被针对..我研究一下呢。是搜狗能搜公众号内容。
sunnysab
3 月 23 日
我之前缓存过一些微信公众号文章,用 cloudflare workers 做的,效果还不错,没有遇到反爬。
最近用自己的真实 ip 跑,几十几百篇都没啥问题?

---
当前是自用,抓取一百多个公众号。如果开放,可能遇到的问题会比较多。
sweeyeah
5 月 12 日
@sunnysab 谢谢佬。这跑了一个多月了。确实遇到不少问题。流量被刷爆过几次。现在好了,基本上稳定了。差不多 2000 篇了。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1200142

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX