光看榜单感觉也不是很靠谱。
This topic created in 91 days ago, the information mentioned may be changed or developed.
 |
1
其实是 Qwen3.8 > GLM5.2 > K3 > DPSKv4 Pro 的但是标题写 Qwen3.8 怕被喷
|
 |
shintendoAug 13
2
GLM5.2 > K3 是认真的吗
|
 |
foryou2023Aug 13
3
估计得重新测试了，官网刚刚才更新了更新日志，就是官方的 harness 还不发布，不知道啥时候发布。
|
|
shintendoAug 13
4
@foryou2023 说是明天
|
 |
5
GLM5.2 > K3 认真的吗 +1
|
1 |
jackerbauerAug 13
6
主观太强
|
|
jackerbauerAug 13
7
不过 GLM5.2 > K3 ，确实离谱
|
 |
cueAug 13 via iPhone
8
你们部门……是千问团队吗……
|
 |
QmanmanAug 13 via Android
9
glm5.2 不太行
|
 |
isbaseAug 13 via iPhone
10
据说模型上错了 再用目前的版本试试
|
|
11
|
 |
bowen628Aug 13
13
官方 harness 已经发了，包名 @deepseek-ai/dsh ，这轮盲测可以顺手重跑一次。模型横评不固定壳，工具 schema 、prompt 拼法、上下文回放全会混进分数，最后测的其实是 model+harness 。利益相关：我参与 BitFun ，我们这边一直把 prompt 做成字节级稳定，SWE-Bench-Pro 那轮 KV cache 平均命中 98.67%；拿同一仓库在 DSH / BitFun 交叉跑，应该比只看榜单有意思。
|
 |
TinkAug 13
14
测试方法是啥啊？
|
 |
exhadesAug 13
15
GLM5.2 是什么路边，我这边都是 K3 > qwen3.8max > dsv4Pro > GLM5.2
|
 |
cowcomicAug 13
16
据说已经下架了
|
 |
renzhe8102Aug 14 via Android
19
@exhades k3 路边
|
 |
FantaMoleAug 14
20
之前在梁子的那个内部会议的纪要出来的时候，我就在论坛里的一个帖子提过 DeepSeek 一直是个小而美的公司，梁子本人是很有理想，但是其他人是要吃饭的，这个扁平化的理想主义管理架构在拉进来一堆人之后可能很难管。就 13 号这个混乱百出的样子，感觉可以一窥内部的失控样子
DeepSeek Pro GA 没有让我感到有惊艳的地方，由于公司项目我搭了一套 AI Coding Framework ，所以只要模型不是太差，能够有 GLM5.2 级别的能力，大部分工作不会有太多体感差距。不过今天处理的一个复杂问题，处理结果不及预期，最后是用 opus5 处理掉的 DeepSeek Harness ，刚刚才有空探索了一下项目，准备明天尝试一下。不过看知乎上的评价，感觉一堆人说了半天没有重点不知道说了什么东西，全在聊拓展性 |
 |
aarontianAug 14
21
你们部门的评测标准是模型命名是否符合社会主义核心价值观吗。。
|
 |
yuzo555Aug 14
23
官网的 API Pro 现在是对的模型了吗？消息很多
|
 |
martinmAug 14 via Android
25
自用 K3 > GLM5.2 > DSV4 Pro ，
顺便一说 KimiCode 开集群模式 + DSV4 Flash 子模型 绝配 |
 |
AustonAug 14
26
有点怀疑你们部门的测试能力，哈哈哈，就跟我们公司一群人在那胡测一下，公司自研模型已经比肩 deepseek 和 glm 了，这你敢信？
|
 |
FakerLeungAug 14
27
笑死了，想起我们大部门的 7 月份的测试结果：
deepseek-v4-flash-preview 不如 glm-4.7 deepseek-v4-pro-preview 不如 glm-5.0 |
Select Language