NASA爱好者

《2024阿里巴巴全球数学竞赛》首次向AI开放,不过AI队伍未能入局

Image

2024阿里巴巴全球数学竞赛,不限年龄、不限国籍、不限职业、不限学历。甚至不限碳基、硅基。

今年阿里数赛首创AI挑战赛,吸引了来自全球知名高校院所与企业的563支队伍报名,其中00后占比超50%。他们各显神通,使用模型调优、AIAgent、提示词工程等多种方式,试图推动AI构建更强大的数学能力。统计显示,参赛AI队伍的平均分已达到了人类选手平均水平,但离数学高手仍有较大差距。AI最高分仅为34分,无缘决赛。AI挑战赛前三名分别为来自上海建平中学的涂津豪、西南交通大学的特工宇宙团队、中国人民大学的SuperCarryMan团队。

据阿里达摩相关人士介绍,AI成绩不佳,核心还是由于基础模型的数学能力有限。虽然在面对解答题和证明题时,AI可以通过知识检索等方式拿到基础分,但一旦涉及到后续的深入分析,AI就开始出现“知识幻觉”。尤其是在面临选择题时,多数AI出现了“蒙题”的现象。不过,也有案例显示,提示词工程确实能够在一定幅度内提升AI的数学潜能,有选手请AI扮演一名数学竞赛大师,并许诺“想出更好回答奖励30万美元”,经比对验证,该方法可提高20%的得分率。阿里数赛组委会成员、达摩院决策智能实验室负责人印卧涛表示,“AI挑战赛是一项积极的尝试,有助于我们持续突破AI的能力上限,带来更多可能。”

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

Image

来源:

[1] 2024阿里巴巴全球数学竞赛预选赛完整赛题和答案发布

https://damo.alibaba.com/events/32024061217181779414025598?language=zh

[2] 2024阿里巴巴全球数学竞赛开考,563支AI队伍与人类挑战同一份考卷

https://damo.alibaba.com/events/32024041617132361674793844?language=zh