人工智能助力学术论文创作：定制软件提升检测效果

财联社11月7日讯（编辑 周子意）根据周一（11月6日）发表在科学顶刊《细胞》物理子刊《Cell Reports Physical Science》上的一项研究，科学家已研究出一种机器学习工具，可以很容易地识别出使用聊天机器人ChatGPT撰写的化学论文。

该论文的合著者、美国堪萨斯大学的化学家Heather Desaire指出，“大多数文本分析领域都想要推出一种真正通用的检测器，可以适用于任何东西”。但她表示她的团队正通过制作一种专注于特定类型论文的检测工具，旨在“追求准确性”。

Desaire提出，研究成果显示，通过制定特定的软件策略，可以有效地推动某类论文的撰写。他认为，一旦我们能够便捷且高效地打造出一个针对某一领域的工具，那么在其它领域再开发类似的工具就会变得相对容易。

根据公开数据显示，这种专用的检测器在性能上优于目前市场上存在的两种人工智能检测器，能够有效地协助学术出版社辨别出由人工智能文本生成器所生成的论文。

准确率惊人

Desaire和她的同事在6月份首次描述了他们研发的ChatGPT探测器，当时他们将其应用于《科学》杂志上的Perspective文章。该团队使用人工智能检测器检查写作风格的20个特征，包括句子长度的变化、某些单词和标点符号的频率等，来确定文章是有人类科学家所作还是由ChatGPT所生成的。

当时的研究结果表明，“你可以使用一小部分特征来获得高水平的准确性”。

在最新的研究中，该团队将美国化学学会（ACS）出版的十本化学期刊的论文引言部分作为人工智能探测器的训练对象。

在本研究中，研究者们选用了来自人类作者的100篇已发表论文的引言作为参考素材。接下来，他们指令ChatGPT-3.5按照ACS期刊的特定风格，分别针对这些引言创作了200篇新的引言。值得注意的是，其中100篇是由研究者在提供论文标题的基础上生成的，而其余的100篇则是基于论文摘要进行创作的。

研究结果显示，当把人类撰写的引言和和人工智能从同一期刊上生成的介绍进行测试时，该人工智能检测器能够100%识别出由ChatGPT-3.5编写的前100篇引言（基于论文标题生成的）；而对于后100篇ChatGPT-3.5生成的引言（基于论文摘要所生成的），检测的准确率略低，为98%。

此外，该工具同样适用于ChatGPT-4编写的文本。

在当前市场上，两款人工智能检测器的表现各异。其中，德国的ZeroGPT识别人工智能编写的介绍的准确率在35-65%之间变动，这主要取决于所使用的ChatGPT版本以及介绍是由论文标题还是摘要生成的。另一方面，OpenAI自身的文本分类器工具表现也不尽如人意，其识别人工智能编写的介绍的准确率仅在10-55%之间。

柏林应用科技大学的计算机科学家Debora Weber-Wulff对学术剽窃的研究进行了深入探讨，并对一篇涉及学术剽窃的论文作出了高度评价。她认为，作者们在完成这篇论文时，展现出了令人惊叹的创造力和智慧。

她强调，现有众多技术试图借助人工智能生成的文章预测文本模式来识别作者身份，却忽略了观察写作风格与文体特征的重要性。Weber-Wulff坦诚地说：“我从未考虑过在ChatGPT上运用文体计量学。”