姿势检测技术研究

183 天前
 sing1ee

前段时间,要用到姿势检测的技术,调研了几个模型,汇总做了一个 demo 。

代码在这里: https://github.com/sing1ee/my-pose

主要支持了 BlazePose 和 MoveNet 模型,实验下来前者更加强大。 runtime 支持 mediapipe 和 tfjs ,前者性能更好。

webgpu 和 webgl ,以及 wasm 我都尝试了。

wasm 就算了,前两者有的时候差不多,webgpu 更优。

我还用 cloudflare 搭建了一个网站: https://posedetector.com/

展示这些例子的效果。

折腾了一通,最好项目不用这些技术了,可能要自己训练。

1659 次点击
所在节点    分享创造
6 条回复
kuse2001
183 天前
正和你做类似的事情,可以多交流 https://v2ex.com/t/1118424
sing1ee
183 天前
@kuse2001 太棒了,随时交流。我也想了这些模型,都可以用来做这个
1. 健身
2. 医疗监控
3. 跳舞
ooTwToo
183 天前
yolo 也能解决
sing1ee
183 天前
@ooTwToo yolo 最新的模型,也看了。效果不错
midpoint
179 天前
用来做 聋哑人 的手语翻译,如何?
sing1ee
177 天前
@midpoint 我觉得可以。我目前尝试的是整体的姿势,还有手部细节的姿势识别。两个结合起来。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1118465

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX