16G 显存 GPU 有什么 AI 模型可以部署玩玩的?

286 天前
 zooo

如题,大家在本地搭建过什么模型呢?

1586 次点击
所在节点    机器学习
5 条回复
Back2life
286 天前
如果你是说语言模型,我最近在用的比较喜欢的是这几个:
nous-hermes-13b.ggmlv3.q4_K_S.bin
airoboros-7b-gpt4.ggmlv3.q4_0.bin
pygmalion-6b
因为只有 8G 显存,我跑的是如上低配版。
killkstheme
265 天前
llama 2-7B ,github 上有可视化教程
lmkyl
263 天前
stable diffusion
EagerTo
211 天前
@lmkyl #3 有链接么老哥.
lmkyl
206 天前

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/960840

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX