aifollow.news
返回 Tibo
Tibo· @thsottiaux · X· · 原发布时间 AI 评分13

OpenAI 模型引发不同评价,发言者称将逐步改进不足

AI 导读

一名发言者称,这些模型能力很强,但仍有一些待改进之处;引述的另一位用户则称,Astra 6.2 在其自行运行的研究评测中,以低推理投入达到该评测的上限。材料没有给出评测方法或独立验证结果。

原帖引用 · AI 翻译

@thsottiaux
译文 · 以原文为准

@JoshPurtell 审美因人而异,但很明显,这些模型的评价两极分化。有点像早期 Codex 时的情况。这些模型显然能力极强,但也有一些不够完善的地方,我们会随着时间推移逐步打磨。

回复Josh@JoshPurtell
译文
在这样的日子里,我真切地觉得自己仿佛生活在一个与世界其他人不同的宇宙里。 看到铺天盖地对 6.2 的批评,以及“OpenAI 完了”之类的话……我跑了最有参考价值的自动研究基准测试,结果 6.2 sol/astr 简直是*强得离谱*。 Astra 6.2 在低推理强度下就达到了这项测试的上限 https://t.co/YFhXQbC9dc
原文

Days like this I genuinely feel like I live in a different universe from the rest of the world. Saw ubiquitous 6.2 hate / it's over for OpenAI yada yada ... ran the highest-signal autoresearch bench and 6.2 sol/astr are *absolute monsters*. Astra 6.2 saturates it at low effort https://t.co/YFhXQbC9dc

在 X 查看这条帖子 ↗
相关上下文Josh@JoshPurtell
译文
@_arohan_ 在我最有参考价值的分布外自动研究评测中,Astra 6 的表现优于 Fable 5.2 和 Opus 5.5。我还没测试 Astra 6.2,但估计它会好一些。我不了解他们的内部模型,但在研究方面,你真的那么偏好他们的公开模型吗?https://t.co/nuYWwNILyj
原文

@_arohan_ Astra 6 was better than Fable 5.2 and Opus 5.5 on my highest signal OOD autoresearch eval. Haven't tested Astra 6.2 but assume it's modestly better. I can't speak to internal models but do you really prefer their public models for research that much? https://t.co/nuYWwNILyj

在 X 查看这条帖子 ↗

来源:Tibo · x.com

观点
发现内容有误?提交纠错