原帖引用 · AI 翻译
Rohan Paul@rohanpaul_ai
OpenAI 现已发布其药物化学基准测试 MedChemBench。
其题目来自 117 篇论文和专利,涵盖 761 个经过评分的分子结构,并隐藏了研究人员后来报告的结果。
每道题都停在一个真实的决策节点,提供生物学靶点、迄今合成的化合物以及部分实验测定结果。
表现最好的模型 GPT-6.2 Astra 总体得分约为 84%,在解读化学信息方面近乎完美,但在真正重要的决策上,正确率约为一半。
· UTC+8
MedChemBench 从117篇论文和专利取题,涵盖761个评分分子结构;每道题停在真实的研究决策点,提供生物靶点、已制备化合物及部分实验结果,并隐去研究人员后来报告的结果。材料称,GPT-6.2 Astra 总体得分约84%,但在关键决策上约有一半答对。
OpenAI 现已发布其药物化学基准测试 MedChemBench。
其题目来自 117 篇论文和专利,涵盖 761 个经过评分的分子结构,并隐藏了研究人员后来报告的结果。
每道题都停在一个真实的决策节点,提供生物学靶点、迄今合成的化合物以及部分实验测定结果。
表现最好的模型 GPT-6.2 Astra 总体得分约为 84%,在解读化学信息方面近乎完美,但在真正重要的决策上,正确率约为一半。