爱意满满的作品展示区。
zwplayer

[分享/更新] 上次发完 ZWPlayer 后,我们新增了 HLS 字幕预拉取去重、台词秒搜与整轨 AI 翻译功能

  •  
  •   zwplayer · 5h 3m ago · 276 views

    上次在咱们 V2EX 社区分享 **ZWPlayer**(纯前端网页播放生态库)后,收到了许多 V 友对于流媒体处理和前端播放器体验的宝贵反馈与建议。非常感谢大家的关注和支持! 在跟进和调研大家在音视频开发及日常观影(如精学网课、看英文技术资料、处理外贸会议录像)的需求时,我们发现并集中攻克了一个老生常谈、却鲜有前端播放器优雅解决的技术顽疾:

    在网页里播放 HLS (.m3u8) 视频时,为什么无法对内嵌字幕进行全文搜索,更没法提前把整轨字幕做中外双语 AI 翻译? 今天很高兴跟各位 V 友汇报:我们的重磅新特性——「智能字幕预拉取去重与全栈检索/翻译系统」正式发布上线! 👉 在线实测沙盒(完全免费、纯前端运行不上传数据)ZWPlayer 在线播放器沙盒 下面跟各位前端同行与音视频爱好者分享下我们这次新功能的底层实现思路和体验亮点:

    界面截图如下: 字幕使用截图

    💡 痛点背景:为什么流式字幕分片会是个前端死结?

    在标准 HLS (RFC 8216) 规范中,内嵌的 WebVTT 闭路字幕和视频切片(如 segment-001.ts)完全一致,是按时间分片( Segment )分发传输的。 传统网页播放器(如 hls.js 或普通 <video> 封装)采用的是“按需懒加载”策略——你播到第 40 分钟,它才向网络拉取第 40 分钟那一小段的字幕碎片。这在前端技术上造成了两个硬伤:

    1. 没法做全文台词搜索:当你刚打开视频、进度条停在第 5 分钟时,后面 30 分钟的字幕在浏览器内存里压根不存在,搜索框根本找不到后面出现的台词。
    2. AI 翻译严重割裂:AI 翻译严重依赖连贯的上下文。如果你按 timeupdate 时间轴事件触发,把每隔几秒蹦出来的 3 秒碎段喂给翻译 API ,不仅网络延迟高、断句错乱,而且你想看片前就“预生成完整的双语对照字幕”,根本做不到。

    🛠 这次新增的技术突破:主动式预拉取 + 切片边界去重

    在这个版本中,我们对底层字幕引擎做了彻底重构:核心思路就是把流式字幕变成为本地内存里的“完整字幕文本库”

    1. 主动拉取与边界去重( Boundary De-duplication )

    当视频刚一加载,播放器一旦检测到内嵌字幕轨,不再被动等待播放进度,而是直接主动拉取整份 WebVTT 播放列表并完成全量解析。

    • 边界去重工程细节:因为相邻的 .vtt 切片在起止时间交界处通常会重复携带相同的字幕 Cue (为了防空白或丢帧),直接拼接会导致画面出现重复闪烁。我们专门引入了边界去重与时间戳标准化归一算法,确保在内存里生成纯净、顺序正确的 VTTCue 对象数组。

    2. 毫秒级全文字幕与章节秒搜(新面板上线)

    字幕进库后,点击播放器底部的 CC -> 字幕搜索 即可体验这一新面板:

    • 输入关键词,实时在全片台词中过滤检索,丝毫不引起主线程卡顿。
    • 毫秒级定位跳转:点击任意检索条目,绑定底层媒体元素的 currentTime,瞬间精准画音同步跳转到目标时间戳。
    • 同时兼容外挂与章节:你也可以把本地外挂的 .srt.vtt.bcc.json 双字幕文件,以及章节标记文件( Chapter file )直接拖入窗口,瞬间生成智能检索时间轴。

    3. 整轨 AI 翻译 + “母语搜外语台词”神技

    基于完整的内存字幕库,我们带来了体验极佳的翻译升级:

    • 可以在播放开始前,一键把整轨外文字幕交给 AI 翻译成中文独立轨道。
    • 神级组合玩法 —— 用中文检索外语视频:因为译文是存放在本地的完整轨道,你完全可以用中文关键词,去搜索外语视频里的具体内容,然后精准一键跳转到说那句外语的画面时间戳
    • 中外双轨并排隔离渲染:支持“译文在上、原文在下”双轨同时渲染,并且自带纯 CSS 沙盒样式隔离,主副字号、轮廓勾边都能独立配置,绝不会污染页面现有样式。

    🔗 欢迎大家前往沙盒把玩实测

    这次新上的特性已经在单文件 JS 库 zwplayer.js 中固化,纯 Vanilla JS 无第三方框架绑定。我们搭建的免费在线沙盒欢迎大家随时来测(所有解析和检索均在你本地浏览器 Sandbox 运行,绝不会把你的视频流或本地字幕上传到服务器): 👉 实测体验入口https://www.zwplayer.com/zh/tools/videoplayer/ 不知道各位同行平时在处理 HLS/DASH 字幕、或者自己做播放器 UI 时,还遇到过哪些棘手的流媒体同步问题?或者对咱们这个新功能有什么看法、建议与 Bug 反馈?再次感谢 V 友们的持续支持和鞭策!

    2 replies    2026-07-18 13:30:31 +08:00
    stefwoo
        1
    stefwoo  
       3h 30m ago
    我非常有听剧集的需求,能不能实时翻译完再 TTS
    zwplayer
        2
    zwplayer  
    OP
       2h 44m ago
    有的,当前已经实现字幕到语音,预计近期上线,敬请关注
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3004 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 39ms · UTC 08:14 · PVG 16:14 · LAX 01:14 · JFK 04:14
    ♥ Do have faith in what you're doing.