已绝迹的光流法视频插帧网站 - 开源自制

1 月 2 日
 SpaceTimee

做了一个开源的光流法在线视频插帧网站 Sheas Frameg (没有什么深意,就是 Frame Generator 写不下了):

好,接下来介绍一下:

点右上角可以切换中英文语言,然后上传视频,选择插帧倍数,将文件添加到队列就可以了,视频会直接在本地浏览器中处理,不会上传到任何地方,处理完可以直接预览和下载


下面解释一下为什么现在要做这个项目:

因为 AI 帧生成的兴起,导致传统的光流法古法插帧已经几乎在互联网上绝迹了,AI 插帧固然很好,但却很容易产生形变、伪影、数据依赖等问题,而且由于 AI 插帧高昂的计算成本,目前互联网上已经无法找到完全免费的在线视频插帧工具了

所以为了填补这个空缺,我自己也需要用,就做了这个纯光流法,安全开源免费的在线工具


这不是我的主营项目,也不打算专门开交流群了,所以如果想交流的话就加我另一个项目的新 QQ 群吧:964102080 (群里是可以讨论任何项目的)

另外 Sheas Frameg 有一些已知的限制:采用 AV1 等编码的 WEBM 视频和分辨率过高的视频测试下来可能会导致 OOM ,除此以外,所有主流视频格式都能很好支持,测试下来没有发现问题

这是除 Frok NextChat 以外我的第一个 Next.js 项目,我自己是部署在 Vercel 上的,虽然不属于主营项目,但应该是我目前所有的 Web 项目中复杂程度最高的了


最后再发一遍链接:

2916 次点击
所在节点    程序员
3 条回复
geekvcn
1 月 3 日
市面上绝大多数实时 AI 插帧功能都是假 AI 真光流,打着 AI 是因为现在都在炒 AI 这里面有刀,包括英伟达的 DLSS FG ,SM ,AMD 的 FSR FG AFMF ,小黄鸭,手机插帧/手机“独显”插帧,电视运动补偿。所以不存在什么光流插帧绝迹,反而越来越火应用越来越广。

只是离线渲染插帧确实逐渐被 AI 插帧取代了,因为离线对实时性不敏感,现在做插帧一般还带着 AI 超分,AI-HDR 一起算,最后导出 AI 插帧+AI 超分+AI-HDR 的视频
dimwoodxi27
1 月 4 日
光流法?这项目做出来是纯 show 脑子吗?哥们都会用 AI 跑项目了,不会用 AI 去了解关键帧 I 帧是什么,还神乎其神的说插帧,你那重新编码流我都觉得龟速和体积对不起质量
bigxixi
1 月 4 日
看起来是个 ffmpeg 套壳?

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1182726

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX