aifollow.news
返回 Rohan Paul
Rohan Paul· @rohanpaul_ai · X· · 原发布时间 AI 评分54

卡内基梅隆大学论文报告:Opus 5.5 在 AI 系统构建基准中超过人工基线

AI 导读

Singularity-Bench 让智能体完成预训练流程、推理引擎等六项端到端任务,并在相同 GPU 上与生产系统比较。材料称,Opus 5.5 的综合指数为 1.25,人工基线为 1;其构建的服务引擎每 GPU 小时收入为 11.52 美元,SGLang 为 8.18 美元。

原帖引用 · AI 翻译

@rohanpaul_ai
译文 · 以原文为准

卡内基梅隆大学的一篇新论文发现,Opus 5.5 + Claude Code 构建的预训练流水线、推理引擎和集群编排器,在相同的 GPU 上达到了 SGLang 和 NVIDIA Dynamo 等生产工具的水平,或优于这些工具。

Singularity-Bench 为智能体提供 6 项端到端任务,从预训练模型到构建服务引擎。每项结果都在相同的 GPU 上与 SGLang 或 Claude Code 等生产系统进行对比评分。

Opus 5.5 的 Singularity-Index 得分为 1.25,其中 1 代表人类基准水平,而其他 10 个智能体的平均得分为 0.58。其服务引擎每 GPU 小时获得 11.52 美元,SGLang 则为 8.18 美元。

来源:Rohan Paul · x.com

论文
发现内容有误?提交纠错