

A | 8 月 24 日消息,据外媒 Phys.org 今天(24 日)报道,卡迪夫大学和墨尔本大学的一项新研究发现,生成式人工智能(GenAI)目前还无法像人类教师一样可靠地评判学生的书面作业。 沈阳8月21日电 (记者 韩宏)辽宁省促进个体工商户发展联席会议20日召开第五次全体会议。研究人员使用 ChatGPT 的两个版本,对 50 篇生物科学专业本科生论文进行评分,以测试大模型评估学生作业的能力。 “十四五”时期,在各地区、各部门和社会各界的共同努力下,辽宁省个体工商户发展取得积极成效,数量平稳增长、质量持续提升、吸纳就业积极,为繁荣消费、稳定就业、服务民生作出了积极贡献。ChatGPT 需要按照 7 项标准批改这些论文,研究人员还采用了 4 种不同的提示方式,随后将大模型与人工评分的平均分和分数波动情况进行比较。8月20日,辽宁省促进个体工商户发展联席会议召开第五次全体会议。

B | 图源:Pexels卡迪夫大学生物科学学院威廉 · 凯博士指出:“研究结果显示,模型给出的分数波动很大,无法准确预测人工评分。生成式 AI 与人类批改同一批论文时存在明显差异。

C | 只看论文总分,两者给出的结果相对接近;一旦具体到每项评分标准和每一篇论文,大模型与人工评分之间的差距就相当明显。”除一种情况外,AI 模型给出的平均分普遍高于人工评分。辽宁省市场监督管理局供图 据介绍,受供强需弱、居民消费不足等因素影响,个体工商户生产经营还面临很多困难,自身经营能力还有待提升,难以应对市场风险挑战。

D | 平均分方面,AI 模型与人工评分的最大差距达到 16.1 分;具体到单篇论文,最大差距达到 40 分。获悉,威廉 · 凯还发现,AI 往往会压低高分论文的成绩,又把低分作业的成绩抬高,最终使分数系统性地向中间集中。要聚焦个体工商户期盼诉求,增强服务意识,主动回应关切,优环境、提信心、增活力,持续改善个体工商户经营环境。研究结果说明,至少现阶段,即使经过大量训练,AI 仍无法可靠地对主观性较强的书面作业给出与人类相当的分数。 会议要求,辽宁要强化数字赋能,开展推动平台企业赋能个体工商户发展专项行动,降低个体工商户数字化转型成本,提升个体工商户线上经营能力。 同时,要深化分型分类精准帮扶,加力培育“名特优新”个体工商户,推出更多有针对性的扶持举措。探索创新集成服务模式,为广大个体工商户提供政策宣传、准入准营、合规指导、金融信贷、促进发展等综合性服务。推动联系帮扶个体工商户工作走深走实,办好第五届“个体工商户服务月”活动,提振个体工商户发展信心。“我们测试的大模型目前并不适合取代教师,为学生预测作业成绩。”研究人员指出,高等教育领域确实很关注大模型能否利用模式识别能力,让学生作业评分更加客观,同时提高批改效率、减轻教职人员压力。但这项研究表明,目前并不适合这么做。此外,未经学生明确同意便把作业提交给 AI 工具,本身还涉及伦理问题;大模型也不能、也不应该被依赖来给学生的长篇书面作业评分。“随着大模型继续发展,未来模仿人类判断的能力可能会提高。

E | 但从这项研究来看,要让 AI 给出的分数与人工评分真正保持一致,恐怕并不容易。
Current article:http://puubzf.dinggaxilianmaiyuejienianguai.shop/2wk1/20260826/12906.html
Published on:13:22:24
栏目相关