⚠️, DeepSeek-V4-Pro-0813 你们觉得怎么样? 我们部门内部盲测不如 GLM5.2

8 月 13 日
 alanying
光看榜单感觉也不是很靠谱。
4298 次点击
所在节点    DeepSeek
27 条回复
alanying
8 月 13 日
其实是 Qwen3.8 > GLM5.2 > K3 > DPSKv4 Pro 的但是标题写 Qwen3.8 怕被喷
shintendo
8 月 13 日
GLM5.2 > K3 是认真的吗
foryou2023
8 月 13 日
估计得重新测试了,官网刚刚才更新了更新日志,就是官方的 harness 还不发布,不知道啥时候发布。
shintendo
8 月 13 日
@foryou2023 说是明天
Miaoz
8 月 13 日
GLM5.2 > K3 认真的吗 +1
jackerbauer
8 月 13 日
主观太强
jackerbauer
8 月 13 日
不过 GLM5.2 > K3 ,确实离谱
cue
8 月 13 日
你们部门……是千问团队吗……
Qmanman
8 月 13 日
glm5.2 不太行
isbase
8 月 13 日
据说模型上错了 再用目前的版本试试
alanying
8 月 13 日
@jackerbauer @Miaoz @shintendo 确实主观性比较强


@cue 🤣 我要是千问团队我都不敢对外讲,名声不好。
alanying
8 月 13 日
@isbase 还有这回事
bowen628
8 月 13 日
官方 harness 已经发了,包名 @deepseek-ai/dsh ,这轮盲测可以顺手重跑一次。模型横评不固定壳,工具 schema 、prompt 拼法、上下文回放全会混进分数,最后测的其实是 model+harness 。利益相关:我参与 BitFun ,我们这边一直把 prompt 做成字节级稳定,SWE-Bench-Pro 那轮 KV cache 平均命中 98.67%;拿同一仓库在 DSH / BitFun 交叉跑,应该比只看榜单有意思。
Tink
8 月 13 日
测试方法是啥啊?
exhades
8 月 13 日
GLM5.2 是什么路边,我这边都是 K3 > qwen3.8max > dsv4Pro > GLM5.2
cowcomic
8 月 13 日
据说已经下架了
xiaoz
8 月 13 日
@cowcomic DeepSeek 官方公众号已经宣布正式上线了。
lsylsy2
8 月 13 日
@exhades v4pro 预览版我感想是不如 glm ,正式版还没测
@xiaoz huggingface 撤回了,链接进去是 404
renzhe8102
8 月 14 日
@exhades k3 路边
FantaMole
8 月 14 日
之前在梁子的那个内部会议的纪要出来的时候,我就在论坛里的一个帖子提过 DeepSeek 一直是个小而美的公司,梁子本人是很有理想,但是其他人是要吃饭的,这个扁平化的理想主义管理架构在拉进来一堆人之后可能很难管。就 13 号这个混乱百出的样子,感觉可以一窥内部的失控样子

DeepSeek Pro GA 没有让我感到有惊艳的地方,由于公司项目我搭了一套 AI Coding Framework ,所以只要模型不是太差,能够有 GLM5.2 级别的能力,大部分工作不会有太多体感差距。不过今天处理的一个复杂问题,处理结果不及预期,最后是用 opus5 处理掉的

DeepSeek Harness ,刚刚才有空探索了一下项目,准备明天尝试一下。不过看知乎上的评价,感觉一堆人说了半天没有重点不知道说了什么东西,全在聊拓展性

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1234188

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX