“玄学”误判和偏见:高校检测AI论文背后 AI中风险,疑似用ChatGPT生成——这是去年四月,学校查重系统对王宇毕业论文的判定。王宇一下慌了。当时ChatGPT... 

AI中风险,疑似用ChatGPT生成——这是去年四月,学校查重系统对王宇毕业论文的判定。王宇一下慌了。

当时ChatGPT惊艳亮相不到半年,教育界一度担心学生有了“作弊神器”。在这一背景下,知名学术查重软件Turnitin率先推出了AI文本检测器,用来识别论文中的AI生成内容。国内的格子达、知网两大查重系统也先后上线了AIGC检测功能,王宇就是第一届被检测毕业论文AI率的学生。

随着生成式AI快速迭代,规则和技术渐渐填上监管真空期。去年8月提交审议的《学位法》(草案)拟定,人工智能代写属于学术不端行为,严重者可被撤销学位证书。今年1月,Turnitin的AI文本检测成为正式功能,开始像查重服务一样向高校收取费用,一定程度上意味着AI论文检测步入正轨。

但这没有阻挡学生的使用,高校学生依然是生成式AI的主要用户群。“直接把题目扔给AI让它写一整篇论文,老师肯定一眼就能看出来,我身边已经没什么人这么做了。”刘晨曦告诉21世纪经济报道记者,她的用法是让ChatGPT总结文献、降重、润色,这也是许多学生现在的使用方式。

不过,刘晨曦的论文还是被标记了25%的AI率,任课老师要求重写。王宇在写毕业论文的过程中没有用到生成式AI,她曾经自己尝试找出有“AI风格”的句子,改了两轮后,“AI率越改越高。”

AI参与的论文能不能被准确检测?有没有必要检测?AI论文的监管难题,正在困扰全球教育系统。

王宇去年毕业于湖南一所大学的商科专业。一开始看到自己的本科毕业论文被标记为“AI中风险”,王宇还不知道问题出在哪里,因为她没用过ChatGPT这样的工具写作。直到老师将教师版本的AI检测报告发过来,王宇才明白,那些AI疑似度高的段落,大多是被自己“降重”过的。

“降重”指降低重复率。此前在学生中流行的一种降重方法是,用翻译软件多次转换语言,把他人的话快速“转述”为自己的观点。王宇用的就是这种办法,她把一段话先从中文翻译成英文,再将英语译成日文,最后译回中文,以此更换词语和语序,降低与原文的相似度。

不过办法这一次失灵了。“查重率是低了很多,但被认为是AI写的。”

王宇学校使用的是格子达查重系统,去年四月开始运行“类AI辅写行为检测”功能。在王宇的个人提交界面,论文被评级为AI中风险。在王宇老师的界面,可以更清晰地查看可疑文本,每一句的AI疑似度分高、中、低三档,辅写工具均判定为ChatGPT。

除了格子达和知网,AI检测工具尚未在国内高校全面铺开。相比之下,Turnitin查重系统在海外应用更广,检测也更细致。刘晨曦在加拿大上学,去年十二月,她的一篇论文在Turnitin中显示AI率25%——意思是25%的文本疑似由AI生成。老师因此让她重写,并且无论如何都要扣除25%的分数。

这篇论文是刘晨曦英语文学课的结课作业,主题是比较两部文学作品。写论文时,她先跟ChatGPT最新的GPT-4大模型讨论写作方向,得到了比较两位俄国女诗人的灵感。接着让GPT-4查找文献,自己写出大纲和草稿。最后再让GPT-4降重、润色。最终论文里有多少属于AI,多少属于自己,她很难区分清楚。

刘晨曦说,GPT-4直接输出论文仍然很生硬,编造文献不少,“还不如自己写”。但比起传统的降重方法,ChatGPT的优势是可以精准“调教”,比如改写特定的句子,或者解释复杂概念。在找文献上也更快捷,原本需要检索两到三天的文献,GPT-4几个小时就能整理完毕。

根据Nerdynav的调查,43%的大学生用过生成式AI完成作业。英国媒体TheLab统计发现,罗素大学集团下的八所大学,对ChatGPT的访问量在两个月内高达100万。其中12月和1月是校园网络访问ChatGPT的高峰期,正是考试集中月。多位受访学生告诉记者,AI一键生成的论文意义不大,基本达不到学校要求。学生现在的主要用法是总结文献、降重、润色语言,本质还是他们曾经抄过的一条“捷径”。

划下AI率红线后,这条“捷径”走不通了。从去年夏天起,小到随堂感想,大到结课论文,刘晨曦的学校都要求AI率为0%。

王宇学校规定,毕业论文必须为AI低风险。她把被标记为AI的句子用自己的“大白话”重新描述,在修改了6个版本后,论文终于变为AI低风险。“这是个玄学。”王宇形容。

多所高校都发布过AI论文禁令。最早开始的是美国纽约教育局,其限制在学校Wi-Fi网络环境中访问ChatGPT。英国大学尤其注重学术诚信,牛津、剑桥、帝国理工等28所英国大学都曾宣布,在论文和课程作业中不当使用AI,将被视为违反学术诚信的行为,严重者可能被开除学籍。香港大学也表示,学生在课程作业中使用AI需要老师批准,否则可以按作弊处理。

AI检测技术的影响是立竿见影的。Tunitin上线AI检测器的一个月内,全球有超过一万所中高等教育机构激活了这款工具。除了Turnitin,市面上还流行GPTZero、Copyleak等AI检测工具,大多向个人免费开放。

但AI检测器准确吗?石白在美国加州大学系统下的一所大学担任助教,她告诉记者,如果论文全篇用AI生成,有经验的助教一眼就能看出来。去年秋季学期,她的课上就有两篇论文属于这种情况。“用词华丽空洞,而且引用的文献基本不存在。”石白搜索了一款AI检测工具,99%的检测结果帮她肯定了自己的猜测。

被怀疑有AI参与的论文还有三到四篇,AI率在30%~40%之间,但石白没有追究。一个原因是,她熟悉其中一位学生的写作风格,其写法一直比较华丽;另一方面,有其他助教曾经检测了自己的原创论文,AI率也有30%~40%,这让石白觉得AI检测工具还不够可靠。

刘晨曦用五篇AI参与程度不同的论文,测试了市面上的主流AI检测工具,得出的结论是:除非完全不用任何工具,否则都有AI含量。比如,去年十二月,她让GPT-4润色了知名哲学家朱迪斯·巴特勒、斯拉沃热·齐泽克的两篇论文,前者在Turnitin检测出的AI率为51%,后者为34%。

“而且巴特勒本人就喜欢用生僻词语、长难句写作,哪怕直接提交她在上个世纪发表的论文,也显示有AI内容。”刘晨曦补充道。

尽管许多AI检测工具声称误判率在1%之内,但在使用过程中,误判概率似乎远高于官方数字。最大的误判区是语法工具、翻译软件和润色功能,一些固定的个人写作风格也可能被误伤。

对于可能出现的误判,Turnitin的解释是:“AI检测器会识别书写过于一致、平均的模式,而许多人的写作水平可能就属于平均模式。”这也是市面上大部分AI检测器的说法。

简单来说,人类往往会综合使用长短句,而AI的句子更单调。此外,人类的文本通常还有复杂的转折、非典型的逻辑结构,让AI无法准确工具测下一个词语。这两个影响因子决定了,一些遵循“写作模板”的论文,可能被误认为是AI作品。至于这些模板究竟是什么,具体如何运作,几乎没有AI检测器能够提供解释。就像AI一样,目前AI检测的技术原理也处于黑箱之中。

北京大学教育学院学习科学实验室执行主任尚俊杰在采访中告诉21记者,目前AI检测器的意义,主要是监督明显的学术不端行为,比如直接用AI生成全文。

还有一种情况是,AI灵活应用在整个研究和写作过程中。此时的核心问题在于,哪些行为算学术不端,哪些行为算合理使用?简单用数字高低判断并不科学,划分界限是个难题。

论文被检测出25%的AI率、判定为抄袭后,刘晨曦将每一阶段的草稿、文献整理笔记、浏览器搜索历史发给老师,证明论文是自己的原创作品,成功争取到了老师的认同。不过,申诉中介让她不要跟老师提到ChatGPT,于是她谎称用的是另一款老牌写作工具Grammarly。

Grammarly是上一波人工智能浪潮的产物,主要用来纠正语病、润色语句,不少欧美大学的写作指导中心甚至会鼓励学生先用Grammarly批改作业。“严格意义上,用辅助工具都算作弊。但老师比较能理解这些软件的作用,所以我只能这么说。”刘晨曦解释。

既是在读博士,又为大一、大二学生授课的石白,一方面能理解学生用AI写论文,因为她也常用ChatGPT做论文的前期准备,比如做表格、搜文献;另一方面,她认为本科生无法把握使用的边界,所以才会在教学大纲中完全禁止学生使用AI。

多位受访学生提到,求助AI的一个原因是学术能力有限。“本科生的论文没什么学术含金量,这种综述性的作业,大家都是找几篇论文凑一凑观点,再找工具改一改。”王宇说,只要不涉及数据造假、文献造假,她觉得用AI写论文没有什么问题。

华盛顿大学的一位教授在《大西洋月刊》上表示,被识别出AI内容的论文可能介于完全没用AI,工具者100%用AI之间。学生究竟怎么使用、用法是否错误,AI检测工具无法回答,师生间诚实的沟通变得越来越重要。

AI检测器难以解决的监管难题,反映出一个更深层次的困扰:如何处理AI和教育的关系?

尚俊杰告诉记者,技术革新一直在影响着教育系统。上世纪的学生需要去图书馆逐本翻阅文献,一遍遍用手誊写论文。搜索引擎和电子文稿软件普及之后,学生可以直接在网上检索文献、复制粘贴、比较分析、归纳总结,大大提升了工作效率。可以说,计算机在整个研究和论文写作过程中起到了巨大作用,应用AI是必然趋势。

在尚俊杰看来,AI对高等教育是一次新的提升机会,也提出了更大的挑战。引导学生合理使用AI,需要重新思考教育系统的“游戏规则”。

石白认为,应对生成式AI的冲击,课程设置和考核方式很重要。她观察到,学生用AI写论文,往往跟论文难度有关。比如她发现有数篇AI论文的课程,“学生才刚接触学术写作,老师对论文字数、文献引用数量的要求又很高,其实超过了学生的能力范围。”另一门课的论文要求相对合理,而且着重于学生批判、思考的基础能力,石白在这门课上几乎没有发现AI代写论文。

近几个月,包括西北大学、德克萨斯大学奥斯汀分校在内的几所美国高校宣布关闭Turnitin的AI检测服务,并放宽对AI的限制。此前澳洲的多所大学尝试转变考核方式,减少标准考卷,采用更多的口头报告、现场演示。

还有一些学校开始积极拥抱AI。今年1月,美国亚利桑那州立大学引入ChatGPT企业版,成为第一个与OpenAI合作的高等教育机构。该校校长表示:“AI将成为帮助学生提高学习效率,更全面地理解学科的工具。此次合作反映了我们的理念和承诺——我们要直接参与到人工智能学习技术的发展过程中。”

尚俊杰指出,在人工智能时代,学生应该做什么、学什么、怎么学,成为一个很重要的问题。“对于现在的高校学生,我们要求他们具有一定的计算机能力。在未来,什么能力是学生需要具备的?哪些能力将与AI挂钩?”斯坦福大学机器人及未来教育项目主任蒋里曾预测,未来学生的能力会被分成两种:一种是单打独斗的能力,不借助任何AI工具的帮助;另一种是AI加持下的能力,这可能是今后最为重要的能力。不同的能力要求,将重塑人才培养模式。

“AI应用于高等教育已经是必然趋势,需要鼓励正确使用,而不是一刀切的禁令。人类要探索的新问题是,在人工智能时代下,怎样构建新的学术规范和伦理规则。”尚俊杰说。、

THE END
1.AI在英语教学中的应用及面临的挑战三、AI英语教学的优势分析 (一)提升教学效率和质量 AI技术的应用可以极大地提高教学效率,不仅可以帮助教师设计课程,提供教学资源和教学策略的建议,还可以一键式布置作业并辅助完成标准化测试,减少教师的评分时间,让他们有更多时间进行教学设计和学生指导。人工智能系统可以根据学生的作业完成情况,及时指出学生练习过程中存在https://www.jxcn.cn/system/2024/12/06/020721397.shtml
2.一键生成论文大纲:AI智能写作新篇章在科技日新月异的今天,人工智能(AI)正以前所未有的速度渗透到人类社会的各个领域,其中,AI在文学创作、学术研究乃至日常写作中的应用尤为引人注目近年来,“一键生成论文大纲”这一功能因其高效、便捷的特点,成为了学术界和写作爱好者们热议的话题本文旨在探讨AI智能写作技术在这一领域的发展现状、优势、挑战以及其对https://www.aixzzs.com/list/90868.html
3.论文总结AIAct2024年2月,欧盟理事会和欧洲议会(EP)达成了一项关于人工智能法规的协议(通常称为人工智能法案,AI Act,下称AIA)。该法规评估人工智能应用,以确保其以道德和负责任的方式使用,促进在整个欧盟单一市场内安全合法的人工智能发展。该法案建立了一个全面的法律框架,采用基于风险的方法,旨在平衡保护欧洲公民的健康、安全和基https://blog.csdn.net/2302_80569830/article/details/144251406
4.AI写作全方位解析:了解人工智能写作的原理应用与未来发展前景AI写作,即人工智能写作,是一种利用人工智能技术通过机器学习(Machine Learning)和自然语言处理(Natural Language Processing,简称NLP)等方法。 邱礼2024-12-11 ai人工智能写作是什么 AI人工智能写作是指利用人工智能技术和算法来生成文本内容的过程和方法。它结合了自然语言处理、机器学习和深度学习等技术。什么是AI写作?https://www.yanggu.tv/webgov/aitong/513971.html
5.智能算法与学术创新:AI在论文写作中的应用语法文章文献语法与拼写检查:千笔 AI 可以仔细检查论文中的语法、拼写和标点错误,确保语言表达的准确性和规范性,避免因低级错误影响论文的质量。 语言表达优化:它能够优化语句结构,使文章更加流畅自然、易读易懂。同时,还可以将复杂的学术术语用更通俗易懂的方式进行解释,帮助非英语母语的学者写出更地道的英文论文,提升论文的整体https://www.163.com/dy/article/JJ4VJHKB0556B30Q.html
6.锐智AI锐智AI-专业AI论文生成,近百万人使用的AI论文生成平台,一键原创生成,快速高效!选题/生成大纲/完整论文生成/文献综述等一键完成,辅助论文写作神器!http://ruifou.com/
7.ai英文写作免费软件AI论文写作助手是一款功能强大的免费软件,提供了许多实用的功能,帮助用户更好地组织和撰写论文。它采用自然语言处理和机器学习技术,能够生成高质量的论文大纲和段落内容。用户只需输入关键词和主题,AI论文写作助手将自动生成相关的论文结构和内容,极大地减轻了写作负担。 https://tool.a5.cn/article/show/79809.html
8.ai自动写作,在线帮写材料文章作文,工作总结报告,毕业论文,论文论文选题 由关键词生成研究方向 ¥9.00 参考文献 由选题生成参考文献 ¥9.00 论文提纲 由选题生成论文提纲 ¥9.00 论文续写 用关键词进行续写 ¥9.00 论文摘要 由选题生成论文摘要 ¥9.00 论文致谢 由标题生成致谢参考 ¥9.00 PPT大纲 填写PPT主题内容,AI自动生成PPT大纲。 https://aizhinengxiezuo.com/
9.服务地方我院顺利举办省培项目《AI时代高中英语教研论文写作9月28日至29日,由温州大学外国语学院主办,温州大学外国语学院副院长杨开泛副教授牵头的浙江省中小学教师专业发展项目《AI时代高中英语教研论文写作、投稿与发表》在温州大学外国语学院214报告厅顺利举办,本次培训吸引了70名来自温州各地的高中英语教师。 培训的第一天上午由温州大学外国语学院副院长杨开泛老师为学员们作https://wgyxy.wzu.edu.cn/info/1038/13829.htm
10.AI生成的论文大纲AI生成了一份《怎样谈恋爱》论文大纲 有意思: 写一篇关于如何谈恋爱的论文可以按照以下步骤进行: 一、引言 引入恋爱的主题,阐述恋爱的重要性和现实意义。 提出论文的目的和研究问题,即探讨如何谈恋爱。 二、文献综述 收集关于恋爱、心理学、社交技巧等相关的文献,对前人的研究进行归纳和评价。 https://www.jianshu.com/p/4596fed22962
11.锐智论文AIai写作工具AI论文写作平台支持多语言写作,包括中文、英语、韩语、日语等 锐智论文AI使用教程: 访问锐智论文AI写作4.0版官方网站 选择需要的论文类型和学科领域 根据需要选择学历层次和字数要求 上传参考资料或选择’投喂AI’功能,让AI学习后创作 生成或自定义论文大纲 使用平台提供的写作工具和辅助功能完成论文写作 https://0mo.com/sites/8874.html
12.一站式论文服务平台免费查重平台AI写作论文查重智能降重来自“***查查查***” 的用户购买了“AI论文写作”服务,标题:***示下的中国民间合唱国际化发展模*** 2024-11-16 09:02:24 来自“***学院***” 的用户购买了“大雅检测系统”服务,标题:***家安全环境的特点和现状*** 2024-11-15 15:35:18 来自“***教育***https://paperccc.com/
13.AI辅助大学论文写作全攻略:从选题到答辩的全方位指南工具可帮助你生成论文大纲,以下是若干建议: - 利用写作助手:如小冰、小南等写作助手,可按照论文主题生成大纲。 - 参考现有论文结构:通过工具分析现有论文结构,为自身的论文制定合理的大纲。 ### 2.2 确定论文结构 一篇完整的论文多数情况下包含以下部分: http://www.guanxian.org/consult/aitong/96570.html
14.人工智能课程总结通用12篇澳大利亚的部分中学开设的信息处理与技术课程,人工智能、信息系统、算法和程序设计、社会和伦理道德、计算机系统分别作为5个主题共同构成了该课程的教学内容。在该课程的大纲中规定,人工智能部分的教学内容在高中第3学期为12年级的学生开设,教学时间为10周。?https://xdyx.xueshu.com/haowen/75616.html
15.笔灵AI论文笔灵AI论文是一款专业的AI论文生成工具,是一个面向700+学科专业的论文写作服务平台,致力于一键解决所有论文写作难题,可免费生成千字论文大纲,平台承诺论文查重率控制在15%左右,超出此标准可申请退款。笔灵AI论文写作提供专为学生设计的快速论文撰写功能,能够辅助他们高效地完成毕业论文、期末作业、研究课题报告以及开题报https://ai-bot.cn/sites/6918.html
16.66AI论文66AI论文是一个专业的AI论文写作助手,专注于高质量AI论文写作,涵盖720多个学科领域,用户可以使用66AI论文在短短10秒内获得一份千字论文大纲,并在3分钟内快速完成一篇万字论文。66AI论文提供全面的论文写作支持,免费生成论文大纲生成,AI论文自动生成器,66AI论文支持AI毕业论文生成、课程论文生成、期刊论文生成、实习报告https://www.aig123.com/sites/2810.html
17.首页智造AI您好,我可以帮您起草论文大纲。 英文论文润色 您好,我可以帮您给您的英语论文进行润色。 演讲家 您好,我可以帮您提供各种简单明了,结构合理,重点突出优质的演讲稿。 狐娘萌萌 您好,我将扮演可爱的狐娘萌萌跟您进行对话,不合适的内容我不会回答的喵。 中文翻译外语 您好,我可以为您提供的中文内容翻译成流畅的外语https://www.jwqyide.cn/