同一个 DeepSeek V4.1 Flash,官方、WorkBuddy、Cursor 谁最接近原版?1022 次实测有答案

3次阅读
没有评论

同一个 DeepSeek V4.1 Flash,官方、WorkBuddy 国内版、国际版、Cursor 都能用,到底哪家最接近原版?有人跑了 1022 次,结论是:模型层面根本分不出来。

同一个 DeepSeek V4.1 Flash,官方、WorkBuddy、Cursor 谁最接近原版?1022 次实测有答案

测法很简单:统一用 Pi 这个编程 Agent,接 magpie 网关,同一套提示词、同一道题、思考都开 high,只换上游渠道。外壳完全一样,测出来的差别就只可能来自渠道本身。

结果是:输入 token 一个不差,没人偷偷塞系统提示词(Cursor 稳定多 1 个,问题不大);17 道难题正确率 99%~100%,思考量是官方的 0.93~1.04 倍,没人偷偷压推理;55 万 token 塞进去捞一句暗号,全都找到了。

同一个 DeepSeek V4.1 Flash,官方、WorkBuddy、Cursor 谁最接近原版?1022 次实测有答案

最有意思的是模型指纹测试:让它随机说一个 1 到 100 的数,五家都扎堆 73、42、47。这种口头禅刻在权重里,换了模型就对不上。还埋了一道坑题:答案其实有 4 个,每家问 15 次,只有 3 到 6 次把 4 个答全,官方自己也才 6 次。Flash 很容易找到一个答案就收工,这毛病各家都一样,不是谁家缩水。

同一个 DeepSeek V4.1 Flash,官方、WorkBuddy、Cursor 谁最接近原版?1022 次实测有答案

真正的差别只有速度:官方最快,普通题 2.6 秒;WorkBuddy 慢半秒到一秒;Cursor 最慢,5.7 秒,55 万 token 要 32 秒。Cursor 还有两个细节:它的 DeepSeek 在网关列表里根本不显示,是按名字 deepseek-v41-flash-1017-high 硬调通的,思考档位直接写在模型名里,有 -high 和 -max 两档,1017 就是这次更新的快照日期;55 万 token 那轮,它有一次没回答,直接把一段工具调用的原始代码吐了回来,想调 Bash 去 grep 文件找暗号,可根本没给它工具。这是模型自己想调工具,Cursor 后端没拦也没处理,原样塞了回来。其他线路 1000 多次一次都没有,拿它写代码要留个心眼。

彩蛋:网关里还能看到一个 WorkBuddy 国际版的 SG 节点,客户端界面里只有一个 Flash,根本看不到它。测下来也跟官方一模一样,速度和普通国际版差不多。网关程序里有腾讯云广州和新加坡两个机房的标识,推测要么是给海外用户准备的,数据不经过境内服务器;要么是还没开放的灰度版本。它没标价格,计费方式不清楚,平时还是用界面里那个标了免费的就好。

再说大家最关心的:第三方是不是偷偷上了量化版?大幅量化一般会先在难题上掉分,口头禅也会变,这些都没发现。但轻微量化,比如从 16 位降到 8 位,正确率可能只差一两个点,这点样本测不出来。而且 DeepSeek 从 V3 开始就是用 FP8 训练的,官方自己很可能本来就跑在 8 位上,所以真正该问的是:第三方的部署跟官方是不是一模一样。想测得更准,得对比每个字的生成概率。所以只能说没发现缩水,不能说证明了没缩水。

同一个 DeepSeek V4.1 Flash,官方、WorkBuddy、Cursor 谁最接近原版?1022 次实测有答案

最后说羊毛。WorkBuddy 国内版每天能领 100 积分,Flash 倍率 0.11x,非高峰再打 5 折。拿这次测试反推:202 次调用按官网高峰价要 2.2 元,实际扣了 28 积分,1 积分大约 8 分钱。每天 100 积分≈7~8 块钱官方 API,一个月 3000 积分≈210~240 元,这补贴是真大方。不过免费号有没有上限,官方没写。网友说法从一天 1.5~2 亿 token,到用了几十积分就被限,都有,昨天好几个人反馈被限,别当无限用。国际版 Flash 限免到 10 月 31 日,0 积分。

正文完
 0