迪肯(Deakin)大学的一名传播学副讲师在近五分之一的评估中发现了机器人协助,使用人工智能技术在考试中作弊再度引发了人们的关注。
据卫报报道,迪肯大学的讲师Sally Brandon 在其评分的54份夏季研究生评估中,通过软件检测发现其中10份有 “显著的、可检测到的机器人协助”,这是五年来发现的机器人作弊的最高比率。
最新的病毒式聊天机器人软件ChatGPT,因其能够躲避抄袭检测工具而引起了学术界的恐慌。Brandon 使用的软件可以检测出一系列的机器人协助,包括帮助改善人工智能生成的文本的软件。
Brandon 正在等待确认,她使用机器人检测器的结果是否会被算作正式的违反学术诚信的证据。“最大的问题是,教育者如何根据这项技术修订评估结果,以便我们能够公平和准确地评估学生的能力。”
科廷(Curtin)大学的高级法律讲师Anna Bunn博士说,这种聊天机器人将 “彻底改变 “教育,但其提供的答案似乎是以美国为中心。当她要求人工智能回答一个关于澳大利亚法律特有的过失侵权行为的问题时,出现了不准确的事实和引述。”我很高兴,但我不认为会一直是这种情况,它确实让我担心。它将彻底改变我们的评估方式……我将寻求增加口头评估。”
新南威尔士大学商学院副院长Dilan Thampapillai曾尝试用聊天机器人进行了几次搜索,也发现它在多个结果中错误地识别了信息。
ChatGPT目前不能使用谷歌等搜索引擎,而是从学术网站上获取信息,包括Trove。
其他类似的软件,包括ChatSonic,可以在其回复中使用谷歌的实时数据。
Beep Media数字制作人Andrew Wrathall要求机器人写一篇关于哈雷彗星在维多利亚地区出现的参考文章。他发现该聊天机器人编造了学术网站Trove的参考资料,并虚假引用了从其他报纸和文章中的引文。
“我认为正在发生的事情是……机器学习在单词之间建立了关联,并且正在从记忆中检索这些关联,以利用语法规则创造一篇看起来真实的文章,”Wrathall说。”但人工智能不知道这句话不是事实。”
计算机科学家和科廷大学副教授Nik Thompson说,ChatGPT擅长对简单的提示产生连贯的反应,如简短的报告,但仍然没有批判性思维和分析的能力。”如果教育工作者现在受到启发,重新思考教学中评估的结构和作用,创造出建立在这些高层次技能基础上的真实评估,可能会有积极的结果”。