机器之心报道

编辑：蛋酱

避重就轻的解释，还是没能获得大家的认可。

几天前，一篇名为《Exploring the MIT Mathematics and EECS Curriculum Using Large Language Models》的论文经历了一场舆论风波。

声明内容如下：

6 月 15 日，Iddo Drori 在 arXiv 上发布了一篇与麻省理工学院几十门课程的考试和作业数据集相关的研究论文，他这样做没有得到其他合著者的同意，尽管已经被告知在发表前应该纠正的问题。我们中的一个人在周末旅行后，于 6 月 18 日星期天才知道这个帖子。

在处理这件事的过程中，我们发现，与 Drori 向我们和为该项目收集数据的学生所传达的信息相反，Drori 并没有得到所有导师的许可来收集构成论文主题的数据集的作业和考试题。其中一些涉及课程的导师，在论文出现在社交媒体上和 Drori 未经许可在网上发布数据样本时，才知道这个数据集的存在且其中包含了自己的课程材料。

这些都是正在通过机构渠道解决的严重问题，所以我们不愿意公开发表这样的声明，但我们觉得有必要解释为什么这篇论文不应该被发表而必须被撤回。我们已经要求 Drori 从 arXiv 撤回这篇论文，并且直接联系了 arXiv 解释了这个情况。

我们想强调的是，这篇论文中的所有学生作者都非常努力地工作，如果数据是在同意的情况下收集的，这本来是一篇非常有趣和宝贵的论文。已经发表的工作中出现的问题并不是学生的错。

而且，GPT-4 不能获得麻省理工学院的学位。

这样一份调查声明，真的足够了吗？回想一周前三位质疑者提交的分析，数据集被污染、手动检查的结果与论文所说的「几乎满分通过」相差甚远，这至少意味着论文内容应该被重新审查。

显然，并不是所有人都对调查结果满意，有人表示这是避重就轻的说法，只是关注他们不应该使用这些数据的事实，而不提捏造结果的错误。

「所以这三位麻省理工学院的教授认为，未经同意使用数据是论文的唯一问题。」

针对「这本来是一篇非常有趣和宝贵的论文」的说法，更多人点了反对：「让 GPT-4 给自己生成的答案打分，这就是有趣和宝贵吗？」

另外，有人发现 Iddo Drori 的个人主页已经更新，删掉了「MIT 客座教授」的 title。而且根据领英主页的信息，他将在这个月结束自己的 MIT 访问之旅。

「一些教授决定让一位客座讲师成为替罪羊，并试图将每个人的注意力从方法论转移到数据隐私问题上，却没有批评这篇论文。这是多么典型的学术政治问题。」

正如三位质疑者在博客中所写的那样：「这篇论文道出了最近人工智能领域研究的一个更大趋势。随着该领域的进展越来越快，新发现的时间节奏似乎在缩短，这往往伴随着捷径。一个特别令人担忧的趋势是使用像 GPT-4 这样基于语言的模型来评估一个模型的准确性的技术。」

对于此事，你怎么看？