你们公司上本地 DeepSeek 了吗?

210 天前
 ccloving
好奇这么多公司搞大模型私有化部署,都用来干啥呢?感觉也就个知识库问答,没有太大价值。
955 次点击
所在节点    问与答
4 条回复
supuwoerc
210 天前
上了 v3,r1 还有蒸馏的小模型,一部分给内部部门在 dify 放工作流做问答,一部分给开发用 roo code 和 continue 。

没啥特别大的价值,但是自己部署的不卡,而且领导不担心内部资料流出。
Mandyer
210 天前
@supuwoerc 请问机器配置是什么样子的,多少参数的模型?
supuwoerc
210 天前
@Mandyer
DeepSeek-R1:总参数 671B, 激活 37B,16 张 H800 一个实例
DeepSeek-R1-Distill-Qwen-32B:总参数 32B ,激活 32B ,1 张卡一个实例
ccloving
210 天前
@supuwoerc 同感,只是做个问答,感觉真没必要花这么多钱。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1115432

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX