准确率 99% 新模型可识别 ChatGPT 生成的文本内容

根据最新在Sciencedirect上发表的论文，科学家们已经开发出一个模型，能够准确地识别一篇文章是由人类作者创作还是由ChatGPT生成的，准确率高达99%。这一重大突破的实现，依赖于20个文本特征和机器学习算法。

这一AI检测模型的研发者表示，他们的模型表现得比ChatGPT制造商OpenAI提供的GPT-2 Output Detector更加出色。在经过对13家化学期刊和3家媒体上文章的测试后，该模型通过这20个文本特征以及XGBoost算法，能够轻松区分人类创作以及GPT-3.5/GPT-4生成的内容。

研究人员指出，尽管目前测试的样本数据还不够庞大，但这一方法却表现出简单而高效的特性。他们强调，这个工具在识别人工智能生成的文本时，准确率高达98%-100%，这完全取决于提示和模型的设计。相比之下，OpenAI目前的检测器准确率仅在10-56%之间，显然这一工具更加先进。

这项研究和发明的目标是为科学界提供一种评估手段。让科学界能够了解ChatGPT对化学期刊的渗透情况，确定其使用的影响，并在必要时迅速引入应对策略。感兴趣的用户可以通过IT之家提供的论文地址深入阅读原文，了解更多细节。

论文标题：准确检测ChatGPT化身化学家的文本创作，Cell Reports Physical Science, 2023, 101672，ISSN 2666-3864，可通过