个人业余项目,做了一个可以物理操作 iPhone 的 agent,不知道有商业前景吗?

7 月 27 日
 fzuccq

淘宝美团常用的 app ,都没有 API ,agent 没法直接调用。走 ADB 容易被风控,豆包手机那条路似乎也很坎坷不好走。

我想,如果能用硬件直接托管 iPhone ,用摄像头观察屏幕,用机械臂点击,或许能绕过大部分风控检测。搞了几个月,agent 跑通了,使用起来还可以。

目前,最大的问题不是可行性的问题,是 token 太贵,点击一次 token 花费 0.2 元。

大家觉得这种 agent 有商业前景吗?

项目地址: https://github.com/physiclaw/PhysiClaw

硬件组装手册和代码都开源,硬件 DIY 成本 1000 元左右。

11856 次点击
所在节点    分享创造
165 条回复
fzuccq
7 月 27 日
@kulove 确实,我也不知道,咱们搞技术的人,喜欢拿着锤子找钉子。
Nasdaq
7 月 27 日
请教 OP,能过滑块吗?
fzuccq
7 月 27 日
@Nasdaq 没遇到滑块验证。iPhone 环境信任度高,操作微信、淘宝没有任何异常需要验证。能不能过,我没试过。
Nasdaq
7 月 27 日
@fzuccq #23 TB 查看卖家店铺营业执照试一下。
fzuccq
7 月 27 日
@Nasdaq 我刚才手工试验了一下,agent 通不过验证。agent 无法边滑动边观察屏幕,agent 做一个动作,移开触控笔,不遮挡摄像头,才能观察屏幕。
Nasdaq
7 月 27 日
@fzuccq #25 感谢,已 Star 支持。
airqj
7 月 27 日
很多人做这个了
靠在社交软件里钓男人挣钱
qaq13037
7 月 27 日
看了 B 站视频评论区和当前评论区,为什么非得要求拟人化呢,好像不拟人这个项目就要被处死一样,就比如 op 说的几个场景,买票之类的,根本没有被检测的可能。有些人啊,屁股就是歪的,拿来就想去做灰产。这个项目我觉得挺有意思的,可能很多人都想过这个思路,但是 op 做出来了,也有继续进化的可能,很佩服,已 star
fzuccq
7 月 27 日
@qaq13037 感谢认可,当前一是硬件 1000 元确实不小门槛,二是 token 贵,也只有黑灰产才会感兴趣。我自己用它在京东七鲜买菜,也挺心疼的。买次生鲜 token 花费 6-7 元。
iixy
7 月 27 日
@timethinker 啊?怎么现在又是蒸馏又是烘焙的,下一步是不是该红烧 ai 了。
lumia1020
7 月 27 日
貌似极客湾做手机续航测试就是这么干的,和楼主想法差不多,只是听说是本地模型来做的。
fzuccq
7 月 27 日
@iixy 烘培的意思是,把 agent 操作 app 的经常性动作,固定下来,下次 agent 要执行某个操作时,直接触发一连贯动作,就像打游戏出个连招,不用每一步都经过大模型。
fzuccq
7 月 27 日
@lumia1020 我看过极客湾测试视频,导航相对比较单一,本地模型应该可以跑得动。
NeverMore11
7 月 27 日
对于 Android 来说,adb + uiautomator 方案没有问题,成本还低,基本上视图树、坐标点完成主流程,截图做关键步骤确认。我天天用这个自动化发小红书,没遇到检测。
Sunyin
7 月 27 日
[极客湾手机续航大横评:电池锁容?电量缩水?谁在浑水摸鱼?] https://www.bilibili.com/video/BV1LR336sEFX

确实,今天刚刷到
HeyWeGo
7 月 27 日
那些上来就说啥完美不完美的听上去就是正确的废话
fzuccq
7 月 27 日
@NeverMore11 不同技术方案适合不同场景,到没有说哪种最优。但如果你想让 agent 能帮你购物、挂号、缴费、打卡,可能需要更 robust 的技术栈。
xue777hua
7 月 27 日
简单的不需要这个 难得你也过不去(刷脸)
fzuccq
7 月 27 日
@xue777hua 个人使用的话,拿起手机刷完脸放回去,让 agent 继续做,问题倒也不大。
grzhan
7 月 27 日
有,国内灰产需求很大。尤其是抖音和微信。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1230118

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX