我在使用某家的 claude 模型时, 会提供文件和提示词.
每次都新开会话, 提供相同的文件. 仅修改提示词.
发现模型会犯同样的错误, 产生同样的幻觉, 生成同一个错误表达.
我不太懂大模型, 但该模型有时非常的聪明, 有时很蠢. 其蠢法很多时候是反复犯同样的错误, 即使提示了模型注意事项, 模型也不会注意.
我理解大模型实际算的是概率, 多次算对没问题, 多次算错也可以理解, 但多次错的一样, 是否和模型采用的精度有关? 也就是供应商业务繁忙时, 通过降低模型精度以为更多人提供降智的服务?
我不能确认, IDE 们统一叫 claude, 没有带精度信息.
我关注过自部署模型, 一些模型会声称 4bit 性能几乎无损耗, 实际上在真正有难度的问题上差别明显.
claude 供应商有做降低精度这样的事吗?
这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。
V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。
V2EX is a community of developers, designers and creative people.