[开源免费] 实时数字人 OpenTalking 项目演示 -- 新闻主播数字人

[xuxin123122]

谢谢 V 站大佬们之前的支持，目前 Github 上面马上 700 stars 了~ 承蒙厚爱！

Github 传送: https://github.com/datascale-ai/opentalking


最近拿 OpenTalking 搞了个支持四个语言的新闻主播演示，大佬们可以看看提提意见: https://www.bilibili.com/video/BV1ZSLm6MEaQ/?vd_source=4820076c616e58ceb357c528a571ff11

欢迎大家体验！多多提意见！

[Atukey]

目前的架构只能在 3090 / 4090 上跑吗?

[xuxin123122]

@Atukey 应该不是的~ 如果 TTS(text to speech, ASR)和 STT (speech to text)用 api 的话，用 3G 显存部署个视频驱动模型就能跑啦。

只是我还没借到除了 3090 4090 的设备 所以没测试~

我们最近搞了个全线路本地部署的方案，大概占用显存 8G 左右，快要上线啦

[Atukey]

很感兴趣,上线了可以测试下吗?

[humbass]

数字人可以跟物体交互吗

[xuxin123122]

@humbass 这个是啥意思？ 目前是对话

[humbass]

@xuxin123122 原来是博士发的开源 666!
我说的交互：现在有些直播间数字人可以拿手机，拿衣服展示， 还可以回复屏幕上的评论（形象动作上感觉在看手机）。
并且数字人相当逼真，没说都不知道是数字人

[xuxin123122]

@humbass 感觉拿衣服的视频可能是提前录下来的？ 不过回复评论那个应该是可以做的~很有意思 我研究一下