應用構想，外語視頻同聲翻譯成漢語（視頻）

[wisetc]

是不是可以幫助一些人，認識國外大佬

有什麼簡便易行的方法

用 AI 對嗎

現階段的技術，聲音識別轉文本具備，文本間語言轉換外語具備，外語文本轉換語言具備，為什麼不可行呢

實時性要求較高，性能上，不過可以在製作過程中延遲，也是可以應付的

（就是人的聲音有音色，有抑揚頓挫，似乎不好調節）

可行否

敬請指教

[hammy]

felo 是不是就在做这种？

[dawn009]

VLC media player 在 CES 2025 上演示其离线 AI 字幕和翻译。

这项新功能可以使用在用户设备本地运行的开源 AI 模型为任何视频自动生成实时字幕，然后也可以将其翻译成多种语言，从而无需互联网连接或云服务。

[dawn009]

然后配上 Text to speech 就行了

[billlee]

Microsoft Teams 和 Google Meet 已经有这个功能了

https://adoption.microsoft.com/en-us/microsoft-teams-premium/live-translated-captions/
https://support.google.com/meet/answer/10964115?hl=en-IE&co=GENIE.Platform%3DDesktop

[NoOneNoBody]

@dawn009 #3
这个应该不是 OP 需求，OP 那个相当于机器作为配音演员，是需要“表演”的

[dawn009]

@NoOneNoBody 有支持语调的 Text to speech

[IHuiNianl]

我记得三星是不是搞了个 AI 的

[NoOneNoBody]

@dawn009 #6
那配音演员比程序员更早失业？😭

[niubee1]

如果是字幕的话，youtube 很早就有字幕实时翻译了吧

[dawn009]

@NoOneNoBody 视频≠电影，同声传译≠配音演员

[NoOneNoBody]

@dawn009 #10
哦，原来 OP 说的是自录视频，理解错了

[href]

可行，我前段时间也有同样的想法，本地跑了一些 demo ，难度上中规中矩，但是觉得商业化方面的需求可能非常有限；

[caola]

华为手机有自带的 AI 字幕 功能，我感觉有字幕就差不多够用了

[dawn009]

另外，实时字幕已经是主流操作系统的内置功能，Windows ，macOS ，Android ，iOS 都支持。是“无障碍”功能的一部分。
有的支持实时自动翻译。

[b4115Z4mRAz9P8EA]

视频用不着实时吧？完全可以先翻译好了啊。。。

[nocmt]

@yqf0215 在线视频

[dawn009]

新东西来了：

国际学术期刊《自然》近日发表研究称，Meta 公司研发的人工智能模型 SEAMLESSM4T 能即时翻译 101 种语言的语音和文本，包括语音到语音翻译，性能超越现有系统。

[wisetc]

@dawn009 外語不用學了，（好消息）😊

[diegobona]

同传现在没有，视频翻译多 比如 videolingo ，用的 claude ，准确率 99%多吧，基本不需要人工优化了

[wisetc]

@diegobona 太牛了，視頻翻譯我認為都已經夠了，謝推薦