是的,Turnitin 提供 AI 写作指标,用来估计一份提交内容中有多少可能由 AI 生成,并以百分比加高亮段落的形式展示给老师。它是基于概率的信号,而不是证明,Turnitin 自己也表示它不应成为学术不端判定的唯一依据。它的分量有多重,取决于你所在院校的政策和老师的判断。
本博客由 ZeroTell 发布,我们也有自己的 AI 检测器。Turnitin 是另一家面向学校销售的公司;以下信息来自其公开声明和文档。
AI 写作指标是什么
Turnitin 最出名的是相似度检测:把论文与网页、出版物和以往提交的作业进行比对。2023 年,它新增了一项独立功能,用来识别 AI 生成的文字。
这个指标的工作方式与相似度检测不同。它不是把你的文本与数据库比对,而是分段读取文本,估计每一段由大语言模型生成的可能性。输出包括:
- 在符合检测条件的文本中,模型认为可能由 AI 生成的部分所占的整体百分比,以及
- 显示这些段落位置的高亮片段。
Turnitin 还表示,其模型会尝试识别经过改写工具处理的 AI 文本,并且一直在更新模型。由于检测器不断变化,任何关于它今天能否识别某类内容的具体说法,明天都可能过时。
关于 ChatGPT 文本及修改的具体情况,请参见 Turnitin 能检测 ChatGPT 吗?
谁能看到 AI 分数
这是最常见的问题之一,答案常常让学生意外。在典型设置下,AI 写作报告对老师和管理人员可见,提交作业的学生却看不到。具体细节由院校的配置决定。
这意味着,除非老师分享,你可能不知道自己的分数。如果你好奇或担心,询问一下是合理的。
Turnitin 等方承认的已知局限
AI 检测基于概率。这不是只针对 Turnitin 的批评,所有检测器都是如此。一些局限被广泛讨论:
- 误报。 人写的文字也可能被标记。Turnitin 承认了这一点,并表示低百分比的可靠性较低,因此在报告中会更谨慎地呈现。
- 短文本。 检测器需要足够多的字词才能判断模式。很短的提交内容更难评估,Turnitin 为该指标设定了最短长度。
- 套路化写作。 实验报告、法律摘要和模板化作业本来就读起来很可预测。
- 英语非母语的写作者。 一些研究和教育者的报告担心,更简单、更规整的英语在检测器看来更“像 AI”。
- 混合和编辑过的文本。 当人和 AI 共同塑造一份文档时,结果会更难解读。
院校实际如何使用它
没有统一做法。大致来说,学校分为几类:
| 做法 | 具体表现 | 学校选择的原因 |
|---|---|---|
| 关闭指标 | 停用 AI 写作报告 | 担心误报和公平性 |
| 作为沟通信号 | 老师可以查看,但必须进一步调查 | 在知情与谨慎之间取得平衡 |
| 作为证据之一 | 分数与草稿、面谈一起纳入诚信档案 | 有多重核查的结构化流程 |
| 由课程决定 | 每位老师自行决定 | 作业类型和 AI 政策各不相同 |
有几所大学公开宣布关闭或限制了 AI 指标,理由是对可靠性的担忧。另一些则保留了它,并规定不得单独使用。
细心的老师如何对待高分
负责任的审阅通常包括:
- 阅读高亮段落,看看它们是否真的不对劲。
- 与学生的其他作业对比,包括课堂写作。
- 核查引用,因为 AI 经常编造不存在的来源。
- 与学生沟通内容和写作过程。
- 要求提供草稿或版本历史。
学生应该预期什么
如果你被问到分数的事,通常会有机会解释。流程、时间安排和申诉途径应该写在学校的学术诚信政策中。在需要之前就先读一读。
解读报告:一个简短例子
假设一位老师打开一篇 1,800 词的历史论文,看到一个中等的 AI 百分比,结尾附近有两段被高亮。
草率的解读会说“这个学生作弊了”。细心的解读会问不同的问题。被高亮的段落是结论和背景事实概述吗?这类内容本来就比较泛泛。它们提出的是与课程阅读材料相关的具体观点,还是在任何同题论文中都可能出现的宽泛陈述?引用格式在那里是否突然改变?学生的版本历史显示这些段落是逐步打出来的,还是一次性粘贴进去的?
有时答案指向 AI 使用,有时指向一个凌晨 1 点写了平淡结论的学生。指标指出了该看哪里;判断仍然需要一个了解课程和学生的人来做。
如果你是使用该指标的老师
AI 分数最适合用作提醒你仔细查看,而不是结论。以下做法会有帮助:
- 在教学大纲中清楚说明 AI 政策,包括允许什么、是否需要声明。
- 设计能体现过程的作业:选题报告、提纲、草稿、反思。
- 熟悉学生的文风,可以在学期初安排一些低风险的课堂写作。
- 对低百分比格外谨慎,Turnitin 自己也这样建议。
- 先沟通,再指控。 很多情况通过一次讨论就能解决。
给学生:保护好自己
无论你的学校是否使用该指标,这些习惯都有帮助:
- 了解每门课的规定。 不同老师的 AI 政策可能不同。
- 在有版本历史的文档里写作,比如 Google Docs 或 Microsoft 365。
- 研究时整理好笔记和来源。
- 在课程要求时声明 AI 辅助。
- 不要试图操纵分数。 很多政策把用工具处理文本、改变它在检测器眼中的样子视为隐瞒行为,结果很少会好。
如果你的作业被标记而你并没有使用 AI,收集好证据并申请面谈。我们关于 AI 检测误报 的文章说明了需要准备什么。
相似度、AI 写作,以及各自能发现什么
在脑子里把 Turnitin 的两份报告分开会很有帮助:
- 相似度报告:“这段文本与已有内容匹配吗?”它能发现照抄和引用不当。
- AI 写作指标:“这段文本读起来像语言模型写的吗?”它看的是写作模式,而不是来源。
学生可能不用 AI 也抄袭(从网站照抄),也可能用了 AI 却没有抄袭任何现有来源(新生成的 AI 文本)。这就是学校两者都用的原因,也说明任何一个单独都无法讲清全部情况。
要点总结
- Turnitin 的 AI 写作指标估计文本中可能由 AI 写成的比例,并高亮这些段落。
- 根据院校设置,它通常对老师可见,对学生不可见。
- 它基于概率:误报确实会发生,尤其是在短文本、套路化写作或非母语写作上。
- 各校做法差异很大,从直接关闭到作为证据之一都有。
- 最好的保护是遵守课程的 AI 政策,并清楚记录你的写作过程。
下一步:找到学校的学术诚信政策,读一读关于 AI 的部分。它通常比你想象的要短。