要检查内容是否由 AI 生成,需要结合三件事:仔细阅读,留意典型的 AI 模式;核实事实和来源;把 AI 检测器当作众多信号之一来使用。然后在下任何结论之前,综合考虑背景,比如是谁写的、怎么写的、为了什么目的。没有哪一种方法单独可靠,但结合起来,就能为决定提供可靠的依据。
无论你是审阅论文的老师、审阅自由撰稿人文章的编辑,还是检查报告的经理,这个方法都适用。
第 1 步:想清楚为什么要检查
先从对你真正重要的问题开始。这个问题很少是抽象的“有没有用 AI”。
- 老师通常需要知道作业是否符合该作业的 AI 政策,是否反映了学生的学习。
- 编辑需要的是准确、原创、有用并符合刊物规范的内容。
- 企业关心的是准确性、品牌语气和法律风险。
你的目的决定了你需要什么样的证据。编辑可以拒掉一篇平淡、不准确的文章,根本不需要证明用了 AI。而要对学术诚信问题做出处理的老师,需要的证据就要有力得多。
第 2 步:阅读时留意警示信号
在使用任何工具之前,先像一位老练的读者那样读一遍文本。留意那些经常出现在未经编辑的 AI 输出中的模式。
文风迹象
- 通篇句子的长度和结构都非常相似
- 宏大的过渡语和抽象、听起来很重要的词汇
- 段落结尾总要把自己总结一遍
- 语气礼貌中立,却没说出什么内容
内容迹象
- 例子是泛泛的而不是具体的(“一家公司可能会……”)
- 每个论点都呈现得四平八稳,没有明确立场
- 笃定的说法却没有来源,或者来源显得过于凑巧
- 信息略有过时,或者对近期事件含糊得出奇
背景迹象
- 与作者平常的风格或水平相比突然变化
- 内容没有回应具体的题目、课堂讨论或写作要求
- 缺少任何真正做过这项工作的人自然会写进去的细节
一两个迹象说明不了什么,人类作者也会写出空泛的文字。几个迹象同时出现,才值得仔细看看。
第 3 步:核实事实和来源
这一步往往比任何检测器都更能说明问题。AI 模型可能写出听起来很权威、却包含错误的文字。
- 检查每一条引用:搜索每一篇被引用的文章或书。它们存在吗?内容和文中说的一致吗?
- 检查具体数字:统计数据和日期应该能追溯到真实来源。
- 检查引语:搜索被引用的句子,确认是谁说的。
- 检查过时信息:用较旧数据训练的模型,可能会描述一些早已改变的情况。
编造的参考文献是出了问题的强烈信号,无论原因是 AI 还是研究不严谨。无论哪种情况,内容都需要修改。
事实核查工具对照来源核实说法第 4 步:使用 AI 检测器
现在再用检测器,但要仔细解读结果。
- 用足够长的文本:短样本给出的分数不稳定。
- 看句子高亮,而不只是总体百分比。被标记的句子是否集中在某一部分?
- 考虑文体:摘要或产品描述这类模板化写作,天然就会得分更高。
- 考虑作者:用第二语言写作的人可能更常被标记。
- 不要挑结果:把文本放进一个又一个工具,直到某个结果和你的想法一致,这不算证据。
| 检测结果 | 应给予多大权重 |
|---|---|
| 高分、长文本、与其他警示信号吻合 | 有意义的信号;继续调查 |
| 高分、短文本或模板化文本 | 弱信号 |
| 高亮零散、各工具结果不一 | 灰色地带;依靠背景判断 |
| 低分 | 并不能证明就是人写的 |
想了解分数为什么会不同,请看 AI 检测器如何工作。
第 5 步:做一次查重
AI 检测和查重回答的是不同的问题。查重找的是与现有来源相同的文字。AI 写的内容仍然可能包含照搬或改写得很接近的材料,人类写作也一样。对于任何要发布或要评分的内容,两者都要查。
第 6 步:收集背景信息
如果事关重大,就和作者谈一谈。
- 要草稿和版本历史:一份随时间逐步写成的文档,和一次性粘贴进来的文档看起来截然不同。
- 问问写作过程:用了哪些资料?结构是怎么确定的?
- 请对方解释某一部分:真正写过的人通常都能从容地讨论。
第 7 步:根据你的目标做决定
回到第 1 步的问题。
- 发布内容:内容是否准确、原创、有用并符合品牌调性?如果是,在你的政策下 AI 参与可能是可以接受的。如果不是,无论谁写的都需要修改。
- 教学:作业是否符合该作业的 AI 政策,并体现了学生的学习?依据全面情况做决定,并遵循学校的流程。
- 企业:内容是否准确、适合以你的名义发出?是否遵守了组织的披露规定?
快速检查清单
需要高效审阅内容时,可以用这份清单:
- 明确你要决定什么,以及为什么。
- 阅读时留意文风、内容和背景方面的迹象。
- 核实引用、数字和引语。
- 用足够长的文本跑一次 AI 检测器,并阅读高亮部分。
- 做一次查重。
- 如果事关重大,要草稿或请对方解释。
- 依据质量和政策做决定,而不只看分数。
示例:审阅一篇自由撰稿人的博客文章
假设你在为一家小公司编辑博客,收到一篇 1,200 词、关于家庭节能的文章。读的时候你注意到,每一节结尾都有一段工整的总结,例子都是假设性的,还有一个统计数据没有来源。检测器高亮了引言的大部分内容和中间的两节。
你不需要证明什么就可以采取行动。搜索那个统计数据;如果找不到真实来源,仅凭这一点就足以退稿。向作者要资料来源,并请对方补充一两个真实的例子,比如某个具体的家电或当地的公用事业项目。如果你的刊物允许经过编辑的 AI 辅助稿件,就说明需要改哪些地方。如果不允许,就参照你们的撰稿人协议。
注意,这个决定依据的是准确性和质量,也就是读者真正在意的东西。检测器帮你知道该往哪里看,而这正是它的作用。
提前设定预期
最容易的检查,是那些事先有准备的检查。如果你管理写作者或教一门课,就尽早、清楚地说明你的 AI 政策。说明什么是允许的(头脑风暴、语法帮助),什么是不允许的(起草整个章节),以及如何披露使用情况。把提交草稿或提纲作为作业本身的一部分。清晰的预期能减少纠纷,也能让偶尔的检查简单得多。
事先约定好检查引发疑问时该怎么办,也很有帮助。一个简短、成文的流程,比如先谈话,再要草稿,只有必要时才进行正式审查,可以保护双方。写作者知道自己会被倾听,审阅者也能避免在压力下仓促决定。
要点总结
- 把仔细阅读、核实事实和 AI 检测器结合起来,而不是只依赖一种方法。
- 编造的来源和错误的事实,往往是最明确、最该处理的问题。
- 结合背景解读检测器的高亮;短文本和模板化文本的得分并不可靠。
- 查重要单独做;它与是否使用 AI 是不同的问题。
- 根据你的实际目标和全面情况做决定,而不是看一个数字。