ChatGTP首次公开亮相已经两年了,在教育领域,它的影响最为显著和有害。越来越多的家庭作业和考试写作是由生成性人工智能而不是学生完成的,这些作业被提交并冒充为成绩、学分和学位的真实工作。贬低高中文凭和大学学位是一个严重的问题。它还将无数本应合格的人派往护士、工程师和消防员等职业和职位,在这些职业和职位上,他们缺乏实际学习可能会产生巨大而危险的后果。
但总的来说,阻止人工智能学术欺诈并不是大多数学校或教育机构的首要任务。令人难以置信的是,一些学校通过允许使用人工智能但不允许使用可以检测到它的可靠技术,积极使使用人工智能来缩短学业成绩变得更容易、风险更小。关闭这些预警系统是一个严重的错误估计,因为正如英国的新研究再次指出的那样,教师绝对不能或根本不会发现聊天机器人吐出的学术成果。
这篇论文由英国雷丁大学的彼得·斯卡夫和其他人撰写,研究了当研究人员在教师不知情的情况下创建虚假学生档案并为这些虚假学生提交最基本的人工智能生成的作品时会发生什么。研究小组发现,“总体而言,人工智能提交的内容几乎无法检测到,94%的内容未被检测到。如果我们对“检测”采用更严格的标准,需要特别提及人工智能,那么97%的人工智能提交内容未被检测到。”
你没看错——大学课程中97%的人工智能工作没有被老师标记为可能的人工智能。但实际上比这更糟糕,正如报告所说,“总体而言,我们6%的检测率可能高估了我们检测现实世界中使用人工智能在考试中作弊的能力。”这不是我们第一次被警告说人类无法自己找到人工智能的工作。去年,南佛罗里达大学的一项研究得出结论,语言学家无法区分人工智能创建的文本和人类编写的文本之间的区别。
去年的另一项研究——这项来自越南的美国大学——发现人工智能探测器在挑选人工智能文本方面比人类教师要好得多。越南团队写道:“尽管[人工智能检测系统]Turnitin正确地识别出91%的论文包含人工智能生成的内容,但教职员工正式报告的论文中只有54.5%是潜在的学术不端行为。”在这项研究中,老师们提前被告知,使用人工智能的论文将在他们的课程中提交,他们只找到了一半多一点的论文。
该研究还使用了“快速工程”,使人工智能探测器更难发现这些论文。尽管如此,机器还是抓住了91%。人类,55%。学校实际上正在关闭这些机器。再一次,人类被告知要寻找它们,但仍然发出嗡嗡声。当人类没有处于警戒状态,也没有使用人工智能探测器时,就像最近英国的研究一样,人工智能工作几乎每次都会被错过。更糟糕的是,英国的研究还发现,平均而言,人工智能创作的作品比实际的人类作品得分更高。报告称:
“我们发现,在83.4%的情况下,人工智能提交的成绩高于相同数量学生提交的随机选择。”。换句话说,一个使用最基本的人工智能提示的学生,没有任何编辑或修改,有83%的可能性超过实际做这项工作的学生同伴,同时如果老师没有使用任何人工智能检测软件,则有6%的机会被标记。
请记住,在真实的课堂上,怀疑使用人工智能的标志并没有多大意义,因为教授们非常不愿意追究学术诚信的案件,即使他们这样做了,学校也往往更不愿意发布任何制裁。最近,英国广播公司报道了一名大学生在学术论文中使用人工智能被发现的案例,顺便被人工智能检测器发现。该学生承认使用人工智能违反了课堂和学校规定。
但是,据英国广播公司报道,“尽管她承认使用了人工智能,但专家组裁定没有足够的证据对她不利,因此她被无罪释放。”现在,如果学校或老师没有得到人工智能检测技术的帮助,使用人工智能作弊很可能会提高你的成绩,同时几乎没有发生任何坏事的可能性。换句话说,如果你的学校没有使用人工智能检测系统,你就必须是个白痴,才能在你的课程和考试中不使用人工智能,尤其是如果你的同学在使用人工智能。剧透警报-他们是。
英国最新研究的结果不容忽视的是,假学生在网上上课,他们的假作业是在网上提交的——在网上,老师不可能知道学生的任何情况,包括他们是否真的是人。它突显了一个现实,即在线课程更容易作弊,尤其是人工智能作弊,因为教师不了解他们的学生,也无法观察他们的工作。当然,学校也可以利用技术来解决这个问题,要么监督作业和考试,要么使用跟踪变化和修订的写作环境。
但就像最初使用人工智能探测器一样,许多学校也不想做这些事情,因为它们需要工作和成本。相反,他们更喜欢在没有人工智能检测器的情况下运行在线课程,没有考试监考,也没有验证工作的能力——让教师成为人工智能侦探。这是一个不起作用、不起作用和不会起作用的解决方案。因此,欺诈行为猖獗,很大程度上是因为学校对检测和后果不感兴趣。两年过去了,AI来了。任何限制其腐蚀力的意愿都尚未到来。