Turnitin 往往能标记出 ChatGPT 写的文字,尤其是几乎没改动就粘贴进来的长段落。随着人们编辑输出、把它和自己的文字混在一起,或者用其他工具处理,这个指标会变得不那么确定,但不确定并不等于安全或被允许。老师会把分数与你的草稿、你平时的写作,以及你能否讨论这份作业放在一起权衡。
ZeroTell 发布本博客,并提供 AI 检测器和人性化工具。Turnitin 是另一家公司,有自己面向院校的产品。本文中关于 Turnitin 的所有内容都来自其公开说明。
Turnitin 如何看待 ChatGPT 文本
Turnitin 在 2023 年为其相似度产品加入了 AI 写作指标。大体上说,它的模型会把提交的内容分段读取,并估计每一段由大语言模型产出的可能性。报告随后会显示一个总体百分比,并高亮它认为可能由 AI 生成的段落。
ChatGPT 是这些模型中使用最广的,所以大多数人问的都是它。指标背后的模型并不是在找“ChatGPT”这个品牌,而是在找语言模型共有的统计习惯:可预测的用词、均匀的节奏,以及流畅但笼统的过渡。
想更全面地了解这个指标本身以及学校如何使用它,请看我们的姊妹篇:Turnitin 能检测 AI 吗?
分场景看:通常会发生什么
Turnitin 以外的人都无法准确告诉你它的模型会给某份文档打多少分。我们能描述的是检测器表现出的一般规律,而 Turnitin 自己的指南大体上也反映了这一点。
| 文本是怎么产生的 | 通常会发生什么 | 政策层面的现实 |
|---|---|---|
| 直接从 ChatGPT 粘贴 | 最有可能被高亮 | 如果不允许 AI 写作,几乎一定有问题 |
| ChatGPT 草稿,轻度编辑 | 往往仍有大段被高亮 | 在大多数政策下仍属于 AI 产出的作品 |
| 你的文字与 AI 段落混合 | AI 段落可能被高亮,你写的通常不会 | 取决于是否允许混合使用以及是否披露 |
| 你的草稿,ChatGPT 修正语法 | 通常影响较小,但无法预测 | 往往允许;查看是否需要披露 |
| 大幅改写过的 AI 文本 | 不太确定,可能被高亮也可能不会 | 观点和结构仍源自 AI |
| 你自己写的,完全没用 AI | 通常较低,但误报确实会发生 | 你没问题;但还是要保留证据 |
原样输出
未经编辑的 ChatGPT 文本是检测器最擅长的。文字流畅、平衡,在词语层面可预测,而这正是这些模型被训练来识别的。
轻度编辑
换几个词或在开头加一句个人化的话,很少能改变一个长段落的整体模式。检测器看的是很多句子,而不是某一个短语。
混合文档
当一篇论文把你自己的段落和 AI 段落结合在一起时,指标可能会高亮某些部分而不高亮另一些。老师会看到这种不均衡,而这往往会引出一次谈话。
大幅改写
一个人对 AI 文本改写得越彻底,它带有的人类模式就越多,任何检测器的把握也就越小。但关键在于:如果论点、结构和证据来自 ChatGPT,这份作业依然不是大多数作业所要求的那种“你自己的作品”。分数更低并不会改变这一点。
为什么分数只是证据的一部分
Turnitin 表示,其 AI 指标不应成为学术诚信处理的唯一依据,并承认误报可能发生。怀疑学生使用了 AI 的老师通常会看:
- 你的其他作业:这篇文章听起来像你课堂上写的和之前的作业吗?
- 你的写作过程:你能拿出草稿、笔记和版本历史吗?
- 你的理解程度:你能在交谈中解释自己的论点和资料来源吗?
- 资料来源:引用的文献是否真实存在,内容是否与论文所说一致?ChatGPT 有编造看似可信但并不存在的参考文献的已知倾向。
- 题目本身:AI 对泛泛题目的回答,在全班范围内往往听起来很相似。
最后一点让很多学生措手不及。如果好几个人用同一道论文题问 ChatGPT,得到的回答往往在结构和例子上雷同,一位要读三十篇论文的老师会注意到这一点。
学生常问的灰色地带
并不是每种 ChatGPT 用法都能明确划为允许或不允许。下面这些情况经常被问到:
翻译。 你用母语写好论文,再让 ChatGPT 翻译成英文。观点是你的,但英文句子是模型产出的,在检测器看来也可能如此。有些课程在披露的前提下允许这样做,另一些,尤其是语言课程,则不允许。去问一问。
提纲。 ChatGPT 建议一个结构,每个句子都由你自己写。很多老师对此没意见,有些希望你披露,少数老师则认为结构本身就是被考核的思考的一部分。
改写某一段。 你写了一段很别扭的文字,让 ChatGPT 帮你理顺。这一段现在读起来可能和论文其余部分不一样。如果政策允许编辑帮助,就保留你的原始版本,以便展示你最初写的是什么。
根据反馈自己修改。 问“我的论证哪里薄弱?”然后自己去改,这几乎是风险最低的 AI 帮助方式,因为每个句子仍然是你写的。
拿不准的时候,给老师发一条简短的消息,具体说明你打算怎么做,就能得到明确的答复。大多数老师都乐于被询问。
在规则范围内使用 ChatGPT
ChatGPT 可以是很有用的学习伙伴。下面是保持这一点的方法:
- 找到课程的 AI 政策:在课程大纲或课程页面上找。如果没有,就去问。
- 在动笔之前使用它:用来理解概念、提出问题,或者用反方观点检验你的论点。
- 自己写草稿:在带版本历史的文档里写。
- 用它获取反馈:针对清晰度或结构,然后由你自己动手修改。
- 永远不要把它当作资料来源:去查找、阅读并引用真实的资料。
- 按要求披露:通常只需一段简短说明你如何使用了 AI。
如果你想在提交前看看自己的文字在 AI 检测器眼里是什么样,检测工具可以显示哪些句子听起来很套路。把它当作对文风的反馈,而不是要达到的目标分数。
AI 检测器逐句给出 AI 评分如果你没用 ChatGPT 却被标记了
误报是真实存在的,而且往往对某些类型的写作打击更大:简短回答、模板化的实验报告、高度套用模板的作业,以及用第二语言写作的人的文字。
如果你遇到了这种情况:
- 不要慌,也不要带着防御情绪:一次标记是对话的开始,而不是判决。
- 收集证据:版本历史、提纲、笔记、查资料时的浏览记录,以及早期草稿。
- 请求面谈:向老师详细说明你是怎么写出来的。
- 主动提出讨论内容:或者在监督下就这个话题写一段简短的回答。
- 了解你的权利:学校的诚信政策会说明处理流程以及如何申诉。
我们关于 AI 检测误报 的指南会一步步讲解。
如果你使用 ChatGPT 超出了允许范围
这种事确实会发生。最好的做法通常是坦诚。如果可以,在事情变成正式案件之前就和老师谈。说明你用了什么、为什么用,并问问能否重做。很多老师对坦白的反应远好于否认,而试图掩盖通常会让结果更糟。
要点总结
- Turnitin 往往能标记原样或轻度编辑的 ChatGPT 文本;大幅改写会让分数变得不那么确定。
- 分数更低,并不会让 AI 生成的作品在你的课程政策下变得可以接受。
- 老师依据的是草稿、写作历史和沟通,而不只是百分比。
- 用 ChatGPT 来理解和获取反馈,自己写草稿,按要求披露。
- 如果被误判,你的版本历史和笔记就是最有力的证据。
现在就打开当前作业的课程大纲,找到关于 AI 的部分。了解规则,是你能拥有的最好保护。