本地部署 AI 的意义在哪里?涉密?

233 天前
 pdog18

DeepSeek 出来以后我个人在互联网上总是会刷到一些本地部署的相关内容,不明白意义何在

8877 次点击
所在节点    问与答
77 条回复
Librola
233 天前
以前本地部署是为了搞涩涩,现在 grok 出来以后涩涩随便写,就再也没有自己部署过了。
duanxianze
233 天前
大公司和政府才需要,就是为了不连外网
psllll
233 天前
因为 服务器繁忙,请稍后再试
aliveyang
233 天前
因为酷
lovedebug
233 天前
意义在于我实现了本地部署 AI ,然后继续用 API
zy5a59
233 天前
现在大部分本地部署 DeepSeek 的,都是引流然后做知识付费的,本质就是蹭一波 DeepSeek 的流量。
LaTero
233 天前
有些企业有需求,但是那些视频都是营销蹭流量的,忽略即可。它们练 DeepSeek R1 到底有多大都不知道,随便弄个 14B 的蒸馏小模型糊弄一下,反正目标观众也不会真的去试,毕竟他们看这种视频只是为了情绪价值,顺便骂一下英伟达。
laydown
233 天前
等待未来。
dddd1919
233 天前
如果将来开源 AI 能支持多模态,就可以用盘里的老师们制作出更适合自己的学习资料,这个公网 AI 是绝对没法办到的
lthon
233 天前
自定义也可以算一个理由吧
xvan
233 天前
toG 都得私有化部署
tsja
233 天前
应付领导对 DeepSeek 的喜爱
nomagick
233 天前
本地运行的模型,不受 《生成式人工智能服务管理暂行办法》 的约束
wangyzj
233 天前
数据安全是很重要的一方面
Eagleyes
233 天前
自建 NAS 的意义在哪里?

本地存储好处是,你永远不用担心资源被下架。
Baymaxbowen
233 天前
我们的系统客户都是银行,全部都是内部系统,这种只能通过本地部署来实现
fivee
233 天前
现阶段一个明显的意义就是能够让地方政府或者事业单位合理花钱
lpxxn
233 天前
让我的 gpu 跑满,心里不是很爽的
germain
233 天前
很多地级政府都在推本地部署“一体机”,最多跑个 30B 的模型,采购费用大家都懂。
edony
233 天前
2B 场景下,安全问题也是重要的考虑之一。

对企业而言,最重要的是内部数据,你永远无法保证外部的服务会不会保存和利用你的数据。例如,你怎么确定豆包/kimi/千问/DS 等等不会根据你提交的“我出生 xxxx 年 xx 月 xx 日 xx 时 xx 分 xx 秒,身份证号是 yyyyyyyy ,帮我算一下我 2025 的运势”来定向推送广告呢?更何况你给大模型的还有 fine-tune 的时候那些重要的领域数据甚至机密数据。所以企业的做法宁可错杀也不放过 —— 所有的都要掌握在自己手里宁可花点钱自己部署。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1115234

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX