致命id
卡迪夫大学新研究:AI 尚无法像人类教师一样可靠地批改作业_我的网站

一 | 8 月 24 日消息,据外媒 Phys.org 今天(24 日)报道,卡迪夫大学和墨尔本大学的一项新研究发现,生成式人工智能(GenAI)目前还无法像人类教师一样可靠地评判学生的书面作业。 来自詹姆斯·韦伯太空望远镜的第一张图片显示了SMACS 0723星系团的闪亮的星空。研究人员使用 ChatGPT 的两个版本,对 50 篇生物科学专业本科生论文进行评分,以测试大模型评估学生作业的能力。ChatGPT 需要按照 7 项标准批改这些论文,研究人员还采用了 4 种不同的提示方式,随后将大模型与人工评分的平均分和分数波动情况进行比较。图源:Pexels卡迪夫大学生物科学学院威廉 · 凯博士指出:“研究结果显示,模型给出的分数波动很大,无法准确预测人工评分。生成式 AI 与人类批改同一批论文时存在明显差异。这张图片中发生了很多事情,但是如果凝视时间足够长,你可能会注意到,一些星系似乎“变形了”,它们的光线被拉长了。然而,这并不是望远镜的人为因素--这是现实本身的扭曲,在被拍摄的空间区域内。引力与质量有着千丝万缕的联系,所以一个天体的质量越大,其引力影响就越大。这种力量是我们能站在地球上的原因,也是让地球绕着太阳转的原因。只看论文总分,两者给出的结果相对接近;一旦具体到每项评分标准和每一篇论文,大模型与人工评分之间的差距就相当明显。

二 | 但是它的工作方式比许多人可能意识到的还要奇怪--引力使时空的结构发生了变化。

三 | ”除一种情况外,AI 模型给出的平均分普遍高于人工评分。詹姆斯·韦伯澳大利亚数据中心的首席科学家Themiya Nanayakkara 博士告诉 New Atlas:“假设有一组彼此靠近的大质量星系;即星系团。将会发生的是,因为这里的集体质量非常大,它将在周围的空间中产生一个弯曲--当你把一个重球放在床上时,可以在床褥上观察到类似的效果。

四 | 因此,当来自背景星系的光线经过这个区域时,它所要走的路径会被弯曲。这导致背景星系的图像被拉长。”这种现象被称为引力透镜,其影响在韦伯的新图像中清晰可见。平均分方面,AI 模型与人工评分的最大差距达到 16.1 分;具体到单篇论文,最大差距达到 40 分。ICRAR的天文学家Robin Cook表示:“所有的物质都会在空间产生这些扭曲,包括你和我,但是只有当真正的天文数量的物质作为透镜存在时,引力透镜的效果才会明显,例如,在新的JWST图像中看到的组合星系团。在这些图像中,我们看到来自非常遥远的星系的光线在前景星系团周围弯曲,形成了令人印象深刻和令人费解的弧线。获悉,威廉 · 凯还发现,AI 往往会压低高分论文的成绩,又把低分作业的成绩抬高,最终使分数系统性地向中间集中。研究结果说明,至少现阶段,即使经过大量训练,AI 仍无法可靠地对主观性较强的书面作业给出与人类相当的分数。

五 | “我们测试的大模型目前并不适合取代教师,为学生预测作业成绩。

六 | ”研究人员指出,高等教育领域确实很关注大模型能否利用模式识别能力,让学生作业评分更加客观,同时提高批改效率、减轻教职人员压力。因为星系团并不是完美的球体,这种现象往往会产生奇怪的特征,比如同一个星系的镜像。

七 | 但这项研究表明,目前并不适合这么做。

八 | ”顾名思义,引力透镜可以放大非常遥远的天体,包括一些太过遥远的天体,否则就无法看到。这给了天文学家一个令人难以置信的窥视最遥远的空间和时间的机会。澳大利亚联邦科学与工业研究组织空间与天文学部的 Ray Norris 教授说:“这里的关键特征是,引力透镜不仅扭曲了光线,而且还放大了光线,就像一个望远镜。因此,如果你用JWST通过引力透镜观看遥远的宇宙,就好像你在JWST上安装了一个额外的镜头,让你看到比没有引力透镜更遥远的星系。

九 | ”而詹姆斯·韦伯太空望远镜特别适合于利用这一现象。

十 | 澳大利亚国立大学天文学和天体物理学研究学院院长Matthew Colless教授解释说:“使JWST特别善于利用这一现象的因素与使它擅长许多事情的因素相同:一个在红外波长下工作的大镜子。

十一 | 大镜子有两个方面的帮助,因为它不仅可以收集更多的光(所以可以看到更暗的东西),而且可以产生更清晰的图像(所以可以看到更小的东西)。在红外波长下工作也很有帮助,因为红移效应意味着宇宙中非常遥远的天体的光线会沿着光谱从可见光移到红外线。

十二 | 此外,未经学生明确同意便把作业提交给 AI 工具,本身还涉及伦理问题;大模型也不能、也不应该被依赖来给学生的长篇书面作业评分。“随着大模型继续发展,未来模仿人类判断的能力可能会提高。但从这项研究来看,要让 AI 给出的分数与人工评分真正保持一致,恐怕并不容易。由于天文学家在引力透镜的帮助下观察的目标是微弱的、小的和非常遥远的,JWST比在可见光波长下工作的较小的望远镜,如哈勃,有很大优势。”人们可以从詹姆斯·韦伯的空前威力中学到很多东西,结合引力透镜,它可以让天文学家研究宇宙在大爆炸后很早的时候的情况。“JWST已经在对宇宙中形成的第一代星系中的一些星系进行成像,”ARC未来研究员Cathryn Trott教授告诉 New Atlas。“它也有能力拍摄它们的光谱,据此,来自星系的光被分成其组成波长,使天文学家能够识别个别元素。来自SMACS 0723领域的凝聚星系的光谱已经向我们显示,在宇宙最初几亿年内形成的星系有氧气,这种元素只在恒星内产生。这些观测结果,结合使用低频射电望远镜对原始氢气的观测,如默奇森广域阵列,告诉我们宇宙中第一代恒星是何时形成的,以及星系如何从JWST观测到的小而结实的星系,演变到今天我们周围的星系。”“而且我们还可能通过测量光在引力透镜周围的旅行时间的差异来获得对宇宙膨胀率和年龄的新的精确测量,如爆炸的恒星或闪烁的类星体,”Colless补充说。“因此,我们预计JWST和引力透镜的结合将成为探索遥远宇宙的一种异常强大的方式。
Current article:http://www.lichuorenrenyitankanmeimu.cfd/news/20260826_87789.pptx
Published on:14:59:29