点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:AI大模型能答对几道高考数学题?
首页> 数字化频道> 世界互联网大会乌镇峰会 > 正文

AI大模型能答对几道高考数学题?

来源:世界互联网大会2024-06-13 16:14

  近日

  2024年高考作文题等

  高考相关话题引发热议

  “AI大模型做高考题”

  也成为一大看点

  AI参加高考

  数学能得多少分

  悄悄问一句

  高考数学题

  你还看得懂吗?

  或许我们看不懂

  但大模型可以

  近日

  复旦大学NLP(自然语言处理)

  实验室LLMEVAL团队

  请来13位大模型“考生”

  一起做2024年高考数学真题

  结果怎样?

  先说结论:

  从整体来看

  大模型们的“高考成绩”

  都不算太高

  OpenAI日前发布的

  新一代旗舰大模型GPT-4o

  与阿里云研发的通义千问

  720亿参数大模型Qwen-72b

  在两次测试中排名都靠前

  正确率稳定在60%以上

  部分大模型的表现

  存在起伏与波动

  如百川智能、字节跳动新近发布的

  Baichuan4豆包大模型

  分别在新I卷和新II卷客观题测试中

  得分排名第一

  但在另一场测试中

  排名相对靠后

  图源:复旦大学NLP实验室

  根据两次评测结果

  该团队发现

  大部分测试大模型在简单题

  (如选择题前三道)

  有较好的准确率

  而在中档题中表现一般

  对于较难的题目

  大模型们的准确率会更低

  少部分题目甚至出现

  “全军覆灭”的情况

  人工智能这么“聪明”

  为什么还会出错?

  AI为什么会把题做错

  测试发现

  让AI大模型做数学题

  仍是一个难度较大的挑战

  首先

  文本输入格式的不同

  会对测试结果造成

  比较明显的干扰

  目前测试主要采用

  上传图片识别文本的方式

  这种方式更类似“人类”

  是对大模型能力的全面考验

  有的大模型还未做题

  就先败在了AI识图这一步

  其次

  大模型的推理能力

  仍有很大进步空间

  较难的题目

  对思维能力的考察要求更高

  大模型的准确率也会更低

  此外

  在多选题方面

  大多数模型表现不佳

  可见,面临复杂选项的时候

  大模型的准确率也会降低

  虽然在解题方面

  AI大模型的短期表现

  还达不到完美

  但在攻克数学问题的路上

  AI的每一次进步

  都是对未来教育想象空间的开拓

  值得更多耐心与期待

  撰文/排版:李汶键 编辑:李飞 统筹:李政葳

  参考丨复旦大学NLP实验室、澎湃新闻、机器之心、量子位

[ 责编:曾震宇 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 乌鞘雨雾乱云飞 汉使旌旗绕翠微

  • 四川布拖县:银饰服饰巡游

独家策划

推荐阅读
奔跑吧·少年2024年内蒙古自治区棒垒球邀请赛在鄂尔多斯市康巴什区开赛。
2024-04-20 17:03
4月2日,随着57652次检测车从南充北站5道缓缓驶出,标志着新建汉中至巴中至南充铁路南充至巴中段(以下称"巴南高铁")启动联调联试,进入工程验收关键阶段,为全线早日开通奠定了坚实基础
2024-04-03 15:11
为切实织密森林“防火网”各地组织人员巡查防火。
2024-04-03 15:11
2024年3月31日,“知音湖北 遇见浪漫孝感”春赏花活动在湖北省孝感市金卉庄园景区启动。金卉庄园花团锦簇,五彩斑斓花卉竞相绽放。人们穿梭在花海之间,享受明媚春光。
2024-04-02 15:40
2024年3月23日,由中国服装设计师协会主办的2024秋冬中国国际时装周在北京开幕。
2024-03-26 21:07
3月17日,原创独立设计师品牌SHANG1 BY SHANGYI 2024秋冬系列时装发布会在北京举行。
2024-03-18 16:39
2024年2月28日,新疆维吾尔自治区巴音郭楞蒙古自治州博湖县境内的博斯腾湖出现推冰景观。
2024-02-29 18:59
云南省曲靖市罗平县马街镇钻天坡,盛开的油菜花梯田在初升太阳映照下,勾勒出一幅田园春景图
2024-02-23 10:59
美丽的三亚湾
2024-01-20 17:42
2024年1月12日,江西省吉安市吉州区庐陵文化生态园层林尽染,色彩斑斓,市民徜徉其间,尽享生态之乐。
2024-01-13 19:43
2023年12月26日,在云南省红河哈尼族彝族自治州元阳县新街镇黄草岭村附近,游客在冬樱花与梯田边游览。
2023-12-26 15:39
2023年12月12日,新疆哈密市巴里坤县第十九届冰雪文化旅游节采冰仪式在高家湖二渠水库进行。仪式主要展示了"头冰"的开采上岸过程。开幕式上还举行迎风旗、祈福词、喝出征酒等仪式。
2023-12-13 16:08
2023年12月13日,河北省正定古城迎来降雪,古城内外银装素裹,犹如一幅淡雅的水墨画,美如画卷。
2023-12-13 15:59
2023年11月28日,贵州省六盘水市明湖国家湿地公园层林尽染,景色迷人。
2023-11-29 15:42
2023年11月28日,江西吉安长塘镇中心小学,老师指导学生剪纸。
2023-11-29 15:42
三角梅原产于巴西,现主要分布在中国、秘鲁、阿根廷、日本、赞比亚等国家和地区。其中,以海南三角梅最为出名。
2023-11-29 11:13
2023年11月23日清晨,朝霞初现,三峡库区湖北省宜昌市秭归县沿江公路G348国道的绝壁岩体上,工人们正在铺设防护网,以防止岩崩和落石。
2023-11-24 15:15
2023年11月23日,黑龙江哈尔滨,哈尔滨站工作人员正在清理站台积雪。
2023-11-23 16:02
2023年11月21日,甘肃敦煌,首趟"敦煌号"铁海联运国际货运班列装载1000吨石棉驶出,经天津港通过铁海联运发往泰国曼谷。
2023-11-21 16:55
2023年11月21日,江苏省如皋市龙游河生态公园,色彩斑斓的树木与一河碧水相应成趣。
2023-11-21 16:55
加载更多