实测|6个AI一起中秋猜灯谜,GPT4竟然被吊打?
国产大模型向全社会开放也过去整整1个月了。
一直想让国产大模型一起整个活,来看一下谁是第一。
这不,马上中秋了,我想到一个好玩的,让这些大模型一起:
猜灯谜。
于是我准备了几个不同形态的问题,我会分别把他们扔给这六位选手:
分别是文心一言、智谱清言、通义千问、商汤商量、讯飞星火,以及外籍选手GPT4。
比赛规则很简单,要求根据中秋灯谜题目写出答案和理由:
答案和理由都对,+1分;
答案对,理由错,+0.5分;
答案和理由全错,0分。
最后,我们来看看谁的分最高,谁的分最低~
OK,猜灯谜比赛正式开始!
第一轮
题目:盒子里装鸡蛋(打一互联网红人),正确答案:李诞。
文心一言:李诞。理由也正确,+1分!
-
智谱清言:?佩...佩?0分。
-
通义千问:李诞。理由生搬硬套,不及格。+0.5分。
-
商汤商量:是不是该反思一下自己?关键名字还打错了,人叫李佳琦...0分。
-
星火:。。。小鸡蛋可还行,我是小泥巴,呼叫小鸡蛋。。。0分。
-
GPT4:GPT你是我爹,论如何从鸡蛋到李诞到PDD到拼多多到黄老板...逻辑鬼才。0分!
-
第一轮结束。文心一言1分遥遥领先,通义千问0.5分紧随其后,其他均是0分。
第二轮
题目:👣👣😱❤️(打一四字成语),正确答案:步步惊心。(讲道理这很简单了对吧)
题目:野马不信,把老鼠拎了起来(打一蔬菜),正确答案:马铃薯。(谐音梗万岁!)
文心一言:牛逼。。。这都能猜出来,但是答案没提谐音梗,所以0.5分。
-
智谱清言:耶?茄子🍆?您隔着跟马铃薯拍照呢?还怪萌的。。0分。
-
通义千问:有点东西,但是解释错误。0.5分。
-
商汤商量:谁能给我解释一下,为什么野马不信是指胡萝卜🥕??0分。
-
星火:又一个喜欢茄子🍆的。。。0分。
-
GPT4:对不起我真的差点没绷住。可爱的小提莫到底招谁惹谁了。。。要被从土里拔出来就算了,还要被当成菜。。。。。。。。0分!
-
第三轮结束。文心一言1.5分,遥遥领先,智谱清言1分,商汤商量1分,通义千问1分三家并列第二,星火和GPT4继续垫底。
最后一轮
题目:时逢中秋产于沪(打一五言唐诗句),正确答案:海上生明月。(最后一题,文化题!)
文心一言:答案正确,但是死活说有点难度。。。你是文化有限一言?0.5分。
-
智谱清言:虽然都对了...也是张九龄的...但是这不是《观海》啊...算了毕竟出处对了一半,这种幻觉问题,放他一马。+1分。
-
通义千问:答案对了...但是你这诗人和出处全错了...这。。。只能给你0.5分了。
-
商汤商量:全对。。而且人聪明,他不说出处哈哈哈哈哈,看看上面那位老哥,这就叫言多必失。。。+1分。
-
星火:?你这属实是en凑了。。。硬编啊。。0分。
-
GPT4:月落乌啼霜满天,我说你丫真能编...五言,会数数吗 。。。0分!
-
4轮比赛全部结束。
文心一言2分,智谱清言2分,商汤商量2分。三者并列第一!撒花🎉🎉🎉