在AI进步主导的时代，区分人类生成的内容和机器生成的内容，特别是在科学出版物中，越来越成为一个迫切的问题。本文直面这个问题，提出了一种强大的解决方案，能够准确地识别和区分化学论文中人类生成的写作和AI生成的写作。
当前的AI文本检测器，包括最新的OpenAI分类器和ZeroGPT，在识别AI生成的内容方面发挥了至关重要的作用。然而，这些工具有着局限性，促使研究人员引入了一个专门针对科学写作的定制解决方案。这种新方法以其在复杂提示和多样化写作风格下保持高准确性的能力为例，是该领域的一个重大飞跃。
研究人员主张专门的方案而不是通用的检测器。他们强调需要工具来应对科学语言和风格的复杂性。这种提出的方法在这种情况下表现出色，即使面对复杂的提示，也能展现出卓越的准确性。一个示例是生成基于真实摘要内容的介绍的ChatGPT文本。这展示了该方法在面对复杂指令时辨别AI生成的内容的能力。
这个提出的解决方案的核心是20个精心设计的特征，旨在捕捉科学写作的细微差别。该模型在来自十本不同化学期刊和ChatGPT 3.5的示例上进行了训练，通过保持一致的性能表现出其多样性，包括高级的GPT-4。集成XGBoost进行优化和稳健的特征提取技术凸显了该模型的适应性和可靠性。
特征提取包括不同的元素，包括句子和单词计数、标点符号的存在以及特定关键词。这种全面的方法确保了对人类生成和AI生成文本的独特特征的细致表述。本文深入探讨了将该模型应用于不包含训练集的新文档时的性能。结果显示了最小的性能下降，模型展示了在对GPT-4文本进行分类时的韧性，证明了其跨不同语言模型迭代的有效性。
总而言之，所提出的方法是解决在科学出版物中检测AI生成文本的全面挑战的可靠方法。它在各种提示、不同的ChatGPT版本和领域外测试中表现一致，凸显了其强大性。该文章强调了该方法的开发敏捷性，约一个月完成一个循环，使其成为适应语言模型不断演变的实用和及时的解决方案。
针对潜在规避的问题，研究人员有意决定不在线发布工作检测器。这个策略性的步骤增加了不确定性的因素，阻止了作者试图操纵AI生成的文本以逃避检测。这类工具有助于负责任的AI使用，减少学术不端行为的可能性。
展望未来，研究人员认为AI文本检测不必成为一场不可战胜的竞赛。相反，它可以被视为一项可自动化和可靠的编辑任务。AI文本检测器在科学出版物中的有效性证明为其融入学术出版实践打开了途径。随着期刊在整合AI生成的内容方面面临困境，像这样的工具为保持学术诚信和促进负责任的AI在学术交流中的使用提供了一条可行的前进道路。