焦点

内地首个AI高考评测 数学全不及格

字号+ 作者:苏州市品茶渠道 来源:时尚 2024-07-01 18:02:17 我要评论(0)

成都市嫩茶地址-成都市新茶地址-成都市茶馆地址

  图:AI得分情况。内

  【大公报讯】据第一财经报道:高考这一高难度综合性测试,地首目前普遍被研究者用于考察大模型的个AI高格智能水平。在前不久高考结束后,考评上海人工智能实验室旗下司南评测体系OpenCompass选取了7个大模型进行高考“语数外”全卷能力测试,测数并于19日发布了首个大模型高考全卷评测结果。学全

  语数外三科加起来的不及满分为420分,此次高考测试结果显示,内阿里通义千问2-72B得303分排名第一,地首OpenAI的个AI高格GPT-4o得296分排名第二,上海人工智能实验室的考评书生.浦语2.0排名第三,三个大模型的测数得分率均超过70%,但大模型的学全数学都不及格,最高分也只有75分。不及在数学试卷上,内阅卷老师们发现,大模型的主观题回答相对凌乱,且过程具有迷惑性,甚至出现过程错误但得到正确答案的情况。大模型的公式记忆能力较强,但是无法在解题过程中灵活引用。可以看出,在数学方面大模型还有很大的提升空间。

  数学关乎复杂推理相关能力,这是大模型普遍面临的难题,也是大模型在金融、工业等要求可靠的场景落地需要的关键能力。上海人工智能实验室领军科学家林达华表示,“现在很多大模型的应用场景是客服、聊天等,在聊天场景一本正经胡说八道影响不太大,但它很难在非常严肃的商业场合去落地。”

1.本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2.本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;3.作者投稿可能会经我们编辑修改或补充。

相关文章
  • 1年超1100万美元!39岁保罗将签约马刺:与波波会面决定联手文班

    1年超1100万美元!39岁保罗将签约马刺:与波波会面决定联手文班

    2024-07-01 17:44

  • 昆山企业打破国外免疫组化试剂市场垄断

    昆山企业打破国外免疫组化试剂市场垄断

    2024-07-01 17:20

  • 四川省级田长最新调整名单公布

    四川省级田长最新调整名单公布

    2024-07-01 16:02

  • 快递新规落地满月,你的包裹“按约投递”了吗?

    快递新规落地满月,你的包裹“按约投递”了吗?

    2024-07-01 15:53

网友点评
精彩导读
热门资讯
关注我们
关注微信公众号,了解最新精彩内容