研究使用 stable diffusion 生成的 png 后有感 如果把全部信息、模型、环境都存入这张图片 是否会成为一种新格式

20 天前
 darkway

刚刚和朋友在群里头脑风暴,当然这也只是一个头脑风暴(

另外来许愿池看看,是否已经有了类似的东西,很想用用

我在看 sd 生成的 png 的时候,发现 png 里已经被内置了一些参数,prompt 。

但是目前要靠一张 ai 生成 png ,和作者所公开的完整的参数表,实现同样的 seed 复现一样的效果是很难的。

主要还有 sd 插件、更多的参数、embeddings 、lora ,包括 stable diffusion 版本、sd 启动的参数(是否节约 vram 、注意力参数)

那有个大胆的想法,能不能做一种格式,把所有的这些都放进去,可能也就一张图片 10-20G 。

这样很方便把自己生成的一个风格就直接这样整体发给伙伴,

这个格式打开是一张图片,但同时也包含了生成它所需的要素,它是一个可以传输和分享的,

这张图片的发行版,也好比是这张 ai 图片的一个 docker ,一个类似 psd 一样的东西。

893 次点击
所在节点    随想
6 条回复
superrichman
20 天前
打一个 zip 包不就解决了
darkway
20 天前
和 gpt 聊了下,这玩意难度应该很高
https://chatgpt.com/share/68a2dc5b-0db4-8005-b06a-7a1dc7be1bf6
beefhotpot
20 天前
comfy-ui 就是使用一套工作流去实现特定风格的,比 stable-diffusion 更灵活些。
andyskaura
20 天前
可以参照 jpg 的图种,实现原理应该一样的,png 也是有头有尾的格式,在尾部再加自定义参数读写就好了。
更方便的点的,直接把 rar 包接在后面,这样压缩工具也能直接点开
qwqquq
20 天前
ComfyUI 生成的图片会默认包含这些信息
killerv
20 天前
ComfyUI 生成图片的时候可以将工作流完整参数代入到生成的 png 中,其实就是保存在 metadata 中。

模型这些根本没必要保存到图片,有个 id 不就好了?

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1153202

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX