研究发现:新一代模型可能让 AI 文本检测器漏检论文摘要
东京首都大学一项研究发现,AI 文本检测器的识别效果随改写模型版本而变化:一组检测器在模型换代前能识别超过 99% 的改写文本,换代后仅识别 3.8%。另一项结果显示,Pangram 漏检了 Meta Muse-Glimmer 改写的 79.8% 的科学摘要。依赖这类工具筛查论文的机构需在模型更新后重新测试。
1 次进展3 篇报道1 个来源
事件进展 1
东京首都大学论文称,模型更替影响AI改写论文摘要的检测结果
东京首都大学的一篇新论文指出,Pangram漏检AI改写的科学论文摘要的比例,随改写所用模型版本而明显变化:它检出了93.5%的GPT-5改写摘要,却漏掉了79.8%的Meta Muse-Glimmer改写摘要。材料还称,它将5000篇人写摘要中的1篇标为AI文本。
查看来源报道 · 1 个来源 · 3 篇报道
- Rohan Paul (@rohanpaul_ai) · 东京首都大学论文称,模型更替影响AI改写论文摘要的检测结果
- Rohan Paul (@rohanpaul_ai) · 东京首都大学研究:Pangram 对不同模型改写的论文摘要检出率差异显著
- Rohan Paul (@rohanpaul_ai) · 研究发现:新一代模型可能让 AI 文本检测器漏检论文摘要
全部报道 3
研究发现:新一代模型可能让 AI 文本检测器漏检论文摘要
东京首都大学一项研究发现,AI 文本检测器的识别效果随改写模型版本而变化:一组检测器在模型换代前能识别超过 99% 的改写文本,换代后仅识别 3.8%。另一项结果显示,Pangram 漏检了 Meta Muse-Glimmer 改写的 79.8% 的科学摘要。依赖这类工具筛查论文的机构需在模型更新后重新测试。
另外 1 家也报道了
- Rohan Paul (@rohanpaul_ai)
东京首都大学研究:Pangram 对不同模型改写的论文摘要检出率差异显著
东京首都大学一篇新论文报告,AI 文本检测工具 Pangram 检出了 93.5% 的 GPT-5 改写摘要,却漏掉了 79.8% 由 Meta 的 Muse-Glimmer 改写的科学摘要;在 5,000 篇人类撰写的摘要中,它将 1 篇标为 AI 文本。研究指出,漏检率主要取决于使用哪个模型改写。
另外 1 家也报道了
- Rohan Paul (@rohanpaul_ai)
东京首都大学论文称,模型更替影响AI改写论文摘要的检测结果
东京首都大学的一篇新论文指出,Pangram漏检AI改写的科学论文摘要的比例,随改写所用模型版本而明显变化:它检出了93.5%的GPT-5改写摘要,却漏掉了79.8%的Meta Muse-Glimmer改写摘要。材料还称,它将5000篇人写摘要中的1篇标为AI文本。
另外 1 家也报道了
- Rohan Paul (@rohanpaul_ai)