HackerRank 推出了新基准 HackerRank-Bench。题目全是私有的长程真实工程任务,比如 GDPR 数据删除、系统迁移、身份对接和前端交互,都是从零写的,没用公开仓库。一共测了 15 个模型,统一用 high 推理档。
Claude Opus 5.5 拿到 51.23%,排第一
GPT-6 Astra 43.51%
Claude Opus 5 42.58%
GPT-5.6 Sol 38.43%
Kimi K3 38.25%,是开源模型里最高的
DeepSeek V4 Pro 17.01%,排最后
多数模型都不到 40%。成本上,Opus 5.5 每个任务 18.9 美元,比 Opus 5 的 47.3 美元便宜;GPT-5.6 Luna 每个任务只要 0.18 美元,得分 26.06%。