跳到正文
认知
返回认知精选
认知精选思想大约 1 小时前2
单一来源当前只有一个可用来源,尚未完成多源交叉核验

检查Saez和Zucman研究的AI审计

From SaneCite:我们检查了 Marginal Revolution 于 10 月 28 日报道的 Emmanuel Saez 和 Gabriel Zucman 研究的匿名 AI 审计,其中列出了 147 个问题,声称这些问题严重到足以改变头条数字,涉及论文、来源以及作者自己的数据。

该审计的事实经得起推敲:在 147 个问题中,我们可以核实的 131 个事实都是正确的,没有任何一个问题的核心事实是错误的。其中 21 个问题会改变头条数字;98 个问题取决于有争议的方法选择;

20 个问题不会改变任何数字;8 个问题我们无法就那个问题进行核查。第二次检查对最初被归类为取决于有争议的方法选择的 99 个标记进行了评分:11 个是标准的,70 个是可辩护的,11 个是有问题的,6 个我们无法评分,1 个存在争议。

审计发现其中有一个,即第 54 号,确实会改变头条数字,这就是为什么现在的计数变为 21 和 98。Saez 和 Zucman 于 10 月 29 日收到了我们的发现,但截至 11 月 6 日未予回复。

这是对审计的审计,代码和数据公开,向作者致敬。这是原始的 AI 审计。这是该审计的 10 月 30 日修订版。Checking the AI audit of Saez and Zucman’s research. 这篇文章首次发表于 Marginal REVOLUTION。

Evidence

来源与证据

单一来源 · 1 个信源

当前仅有一个可用来源,尚未完成多源交叉核验。

发布时间
内容处理
AI 翻译 / 摘要,需结合原文核对
内容有误或来源失效?告诉我们

每天早上收到这 5 条

免注册,填邮箱即可;每封邮件都能一键退订。

提交即表示同意按隐私说明保存你的邮箱,只用于发送简报。

或用 RSS 订阅

AI 翻译、摘要和解读仅用于辅助判断;涉及重要决策时,请回到上方来源核实。