文章主题:ChatGPT, MBA考试, OpenAI聊天机器人, 沃顿商学院教授
ChatGPT参加了一次MBA考试。这里是它的表现
OpenAI的聊天机器人被沃顿商学院的教授安排了一场考试,考试结果对教育的未来意味着什么?
在宾夕法尼亚大学沃顿商学院,一位教授针对ChatGPT进行了MBA课程的期末考试。令人惊讶的是,ChatGPT取得了令人瞩目的B级成绩。
Christian Terwiesch,沃顿大学的运营管理教授,对ChatGPT的表现给出了高度评价。他认为,在基本的运营管理和流程分析方面,ChatGPT展现出了出色的能力。
“不仅答案正确,而且解释也很好,”他在一份新的白皮书中写道。
他进一步指出,尽管聊天机器人在简单计算方面表现出色,但其错误率仍然令人意想不到,这相当于六年级的数学水平。与此同时,当前版的ChatGPT具备根据人类提示调整答案的能力,进而找到正确的解决方法。
“考虑到这种表现,Chat GPT3会在考试中获得B到B-的成绩,”Terwiesch写道。
本文作者针对Terwiesch所提出的几个问题进行了深入探讨,主要目的是为了检验ChatGPT在处理具备不同吞吐量多台机器时是否会产生性能瓶颈。
然而,ChatGPT在使用中等水平的算术时,”犯了一个巨大的错误”。
值得注意的是,ChatGPT在初始阶段曾误判过一个与排队分析相关的问题。当教授指出更优的解答时,ChatGPT随之进行了修改。次日,教授未给予任何提示便再次提出了相同的问题,这一次ChatGPT在首次尝试便能给出正确的答案。
教授强调,这种学习过程可能存在两种情况:一是可以从过去的反馈中吸取教训并进行改进,二是仅仅是因为运气不错而获得正确答案。同时,他还提到,这些答案的质量似乎具有一定的随机性。
经过研究,Terwiesch注意到ChatGPT在提问方面表现出色,能够提出机智且富有幽默感的問題,这使得它在未來的考試中具有很大的潛力。然而,該聊天機器人在某些问题上仍存在不足,導致無法提供合適的答覆。
还有,著名科学期刊编辑说,ChatGPT 缺乏深度和洞察力在一次公开场合,知名计算机科学家Terwiesch提醒众人关注ChatGPT的性能与潜在风险。他在仔细研读ChatGPT对首个提问的回应之后,对其表示高度赞赏,甚至称之为”爱”。然而,他也郑重告诫,ChatGPT在某些相对简单的场景下,却犯下了显著的错误。
“我们离复杂问题的A+级还很远,我们仍然需要一个人在循环中,”教授写道。
“在我的教育观中,一个小学生仍然需要学习7×7=49,以及宾夕法尼亚州的首都是哈里斯堡,尽管计算器已经被广泛使用了50多年,而且学生可以使用谷歌维基百科来寻找大多数事实问题的答案。这是基础技能的性质,需要它们来理解更高级的主题”。
Terwiesch也认为,教育工作者应该关注K-12学生可能利用ChatGPT在作业和考试中作弊。例如,纽约市教育局最近禁止了这种聊天工具,因为可靠的测试对教学很重要,而技能认证不应该因为新技术而受到影响。他指出,学生使用ChatGPT就像可以叫一个 “学术能力一般 “的朋友来为他们完成考试。
但他也认为ChatGPT和类似的技术有能力扮演 “聪明顾问 “的角色–产生优雅但经常是错误的答案,他认为这是培养MBA学生技能的 “完美训练场”,他们需要批判性地评估建议的替代方案。
AI时代,拥有个人微信机器人AI助手!AI时代不落人后!
免费ChatGPT问答,办公、写作、生活好得力助手!
搜索微信号AIGC666aigc999或上边扫码,即可拥有个人AI助手!