文章主题:ChatGPT, 检测器, GPTZero, 自然语言处理
ChatGPT的爆火,不仅让众多学生有了作弊利器,也让一众自己写论文的清白好学生,无故蒙冤!
要说起原因,不由让人深感荒谬——都是因为那些为了「用魔法打败魔法」而造出的各种AI检测器。
实测不可靠,美国宪法竟出自AI之手?
在众多的AI检测器中,GPT-Zero算是最为人所熟知的之一,它是由普林斯顿华人本科生Edward Tian所创立的。更为重要的是,这款检测器不仅完全免费,而且其表现相当出色。
Tian现年22岁,仍在美国普林斯顿大学就读,作为一名大四学生,他主修计算机科学,专注于自然语言处理领域的研究。此外,他还辅修了认知科学和新闻学,以拓宽自己的知识体系。
GPT-Zero能够轻松识别出一段文字中哪些部分是由人工智能生成的,哪些部分是人类编写的。用户只需将需要分析的文本复制粘贴到GPT-Zero的界面中,系统便会自动进行分析和判断,准确区分出人类编写和AI生成的部分。
GPTZero主要依赖两个关键指标来评估文本的质量:困惑度和突发性。从原理上讲,该算法通过分析文本中的随机性和困惑度变化来确定最佳表现。在每次测试中,GPTZero会筛选出具有最高困惑度的句子,即最接近人类语言表达的句子。
然而这个方法其实并不完全可靠。
最近,有好奇的网友就用「美国宪法」做了一个实验,而结果更是让人大跌眼镜——
GPTZero表示,美国宪法是AI生成的!
无独有偶,有越来越多的学生发现,自己辛辛苦苦写的论文,也会被检测器判定为AI生成的。
AI说你是用AI写的 ,你就是用AI写的!
最近几天,一位12年级的学生在Reddit社区中向众人寻求帮助。他表示,在老师的指导下,他们发现一篇论文的部分内容似乎是由人工智能技术生成的。这一情况引起了广泛的关注,因为人工智能在文本生成方面的能力日益增强,这也使得人们对其在各种领域的应用产生了更多的疑问。
我一直保持着优秀的学术表现,然而,我却遭遇了老师怀疑我作弊的指控。我尝试向老师解释,但似乎无法改变他的看法。我深感困惑与失望,因为我确信自己的行为是诚实正直的。
对此老师解释称,使用grammarly(一款在线语法纠正和校对工具)没问题,但GPTzero给出的结果已经非常明确——你就是用了ChatGPT。
绝望的学生表示,自己会提供所有可能的证据,来证明这个所谓的人工智能探测器是错的。
对此,有网友表示完全无法理解老师的做法:「什么叫AI说你作弊,你就是作弊,证据何在?」
另一位网友则给出了更加实用的建议:把ChatGPT出现之前的文章丢进去看看结果如何。(类似于之前的那个「美国宪法」实验)
此外,还可以用OpenAI的官方声明来为自己辩护:「我们真的不建议孤立地使用这个工具,因为我们知道它可能出错,就像使用人工智能进行任何种类的评估一样」。
还有网友分析称,作业论文在结构上通常都有着较为严格的要求,而ChatGPT在训练中又进行了大量的学习。
结果就是,AI生成的内容看起来都是标准的五段式论文。
因此,学生的作业从一开始,就注定了会和ChatGPT生成的文本非常相似。
GPTzero虽然声称假阳性率<2%,但这个数据(即使是真的)更多的是基于对新闻类内容的评判。
此外,OpenAI 还联合哈佛等高校机构联合打造了一款检测器:GPT-2 Output Detector。有不少人都认为,「AI 文本检测器」注定是一场失败的「军备竞赛」,其实际效果并不理想,更无法阻挡 ChatGPT 等 AI 语言模型的发展。
所以该网友认为,我们对GPTzero,或OpenAI的分类器,或任何声称能够可靠地区分人类和AI的工具,都应该抱有怀疑的态度。
尽管 Tian 建立了 GPTZero,他并不反对使用 ChatGPT 等人工智能工具,他认为 GPTZero 应用程序的目的不是阻止这些新技术的使用,而是提供一种负责任地使用这些技术的方法,并提供必要的保护。
同时,相对于对抗或者禁止一项技术,也许更重要的是如何为其使用定下规范和标准。例如,在广告、影视及娱乐等行业,对于 AI 生成类内容的容忍度可能适当提高一些;而在学术、教育和科研领域,非常强调准确性和原创性,毫无疑问,对于 AI 生成内容的容忍度就要低一些。
而如何确定 AI 工具使用的「透明度」,可能要比研究如何「反 AI」,要更有效,也更有意义一些。
此外,凯奔为大家整理了近期雅思考试机经:
关注公众号,扫描下方二维码,发送“雅思机经”验证消息,我会将完整版资料免费发送给大家!
写在最后:一年之计在于春!欢迎大家来凯奔试听GRE春季班!
AI时代,拥有个人微信机器人AI助手!AI时代不落人后!
免费ChatGPT问答,办公、写作、生活好得力助手!
搜索微信号AIGC666aigc999或上边扫码,即可拥有个人AI助手!