使用语音助手控制电脑之完全控制 - 顺便求解决方法！

[hahaba]

之前写过一个帖子：我撸了一个用语音助手控制电脑、树莓派的工具 https://v2ex.com/t/733180#reply40

很多人收藏，但是反馈说不够灵活。于是我加入了类似按键精灵的功能。

通过录制回放来实现高度自定义，可以见 B 站演示视频： https://www.bilibili.com/video/BV1Uz4y1k7KB/

当然也有缺点，录制是根据坐标定位的，如果你的桌面图标变动、分辨率变动都会导致失败。

使用 opencv 的方法吧，普通用户免不了要写代码才能实现，很苦恼，目前也实在想不到更好的方法

[loading]

人工智能啊，就是你人工想好会有的场景，写代码，不然你以为人工智能前面为啥要有人工二字！

[hahaba]

@loading 用户的操作千奇百怪，毫无规律，没有逻辑。只能交给用户自行处理

[codehz]

（所以为啥不用辅助功能 api，至少国外的软件和网页应该会有适配

[hafuhafu]

当然是全上咯，复杂操作给接口 /允许调用脚本让用户自己高度自定义；机械流水线操作用录制；给小白用户提供一些简单的接口比如 ：“执行 XX 目录中名字为 XXX.xxx 的文件”、“等待 X s”之类的拖拉拽点的东西，然后预设一些方案。就是工程量大了些
其实只要能让用户方便“抄作业”，写代码之类的都不是事，反正会有会写的去写。

[hahaba]

@hafuhafu 这工作量就太庞大了，我还要上班，哈哈

[gtheone1]

个人意见
没必要自身集成录制的功能。要录制可以用按键精灵，然后再用神秘鸭调用按键精灵即可。
（神秘鸭只要做一个中间人去调用外部软件就行，具体想做什么事由那个工具来完成）。

[hahaba]

@gtheone1 已经集成了，自己写的还是方便点