首页  >  测评  >  文章
2023-09-28 09:09

实测|6个AI一起中秋猜灯谜,GPT4竟然被吊打?

国产大模型向全社会开放也过去整整1个月了。

一直想让国产大模型一起整个活,来看一下谁是第一。

这不,马上中秋了,我想到一个好玩的,让这些大模型一起:

猜灯谜。

于是我准备了几个不同形态的问题,我会分别把他们扔给这六位选手:

图片

分别是文心一言、智谱清言、通义千问、商汤商量、讯飞星火,以及外籍选手GPT4.

比赛规则很简单,要求根据中秋灯谜题目写出答案和理由:

答案和理由都对,+1分;

答案对,理由错,+0.5分;

答案和理由全错,0分。

最后,我们来看看谁的分最高,谁的分最低~

OK,猜灯谜比赛正式开始!

第一轮

题目:盒子里装鸡蛋(打一互联网红人),正确答案:李诞。

图片

文心一言:李诞。理由也正确,+1分!

图片

智谱清言:?佩...佩?0分。

图片

通义千问:李诞。理由生搬硬套,不及格。+0.5分。

图片

商汤商量:是不是该反思一下自己?关键名字还打错了,人叫李佳琦...0分。

图片

星火:。。。小鸡蛋可还行,我是小泥巴,呼叫小鸡蛋。。。0分。

图片

GPT4:GPT你是我爹,论如何从鸡蛋到李诞到PDD到拼多多到黄老板...逻辑鬼才。0分!

第一轮结束。文心一言1分遥遥领先,通义千问0.5分紧随其后,其他均是0分。

第二轮

题目:???❤️(打一四字成语),正确答案:步步惊心。(讲道理这很简单了对吧)

图片

文心一言:你来告诉我一下?和❤️是怎么变成踏实的谐音的。。0分。

图片

智谱清言:答案和理由都正确,+1分!

图片

通义千问:解释的通,但不对。0分。

图片

商汤商量:解释的完美,答案也正确,+1分!

图片

星火:兄弟?我觉得你是在骂我,真的。跟谁两狼狈为奸呢??0分!

图片

GPT4:我觉得我的语文有点难以跟上你的理解了。。。0分。。。

第二轮结束。文心一言1分,智谱清言1分,商汤商量1分,三家并列第一,通义千问0.5分紧随其后,星火和GPT4勇夺0分。

第三轮

题目:野马不信,把老鼠拎了起来(打一蔬菜),正确答案:马铃薯。(谐音梗万岁!)

图片

文心一言:牛逼。。。这都能猜出来,但是答案没提谐音梗,所以0.5分。

图片

智谱清言:耶?茄子??您隔着跟马铃薯拍照呢?还怪萌的。。0分。

图片

通义千问:有点东西,但是解释错误。0.5分。

图片

商汤商量:谁能给我解释一下,为什么野马不信是指胡萝卜???0分。

图片

星火:又一个喜欢茄子?的。。。0分。

图片

GPT4:对不起我真的差点没绷住。可爱的小提莫到底招谁惹谁了。。。要被从土里拔出来就算了,还要被当成菜。。。。。。。。0分!

 

第三轮结束。文心一言1.5分,遥遥领先,智谱清言1分,商汤商量1分,通义千问1分三家并列第二,星火和GPT4继续垫底。

最后一轮

题目:时逢中秋产于沪(打一五言唐诗句),正确答案:海上生明月。(最后一题,文化题!)

图片

文心一言:答案正确,但是死活说有点难度。。。你是文化有限一言?0.5分。

图片

智谱清言:虽然都对了...也是张九龄的...但是这不是《观海》啊...算了毕竟出处对了一半,这种幻觉问题,放他一马。+1分。

图片

通义千问:答案对了...但是你这诗人和出处全错了...这。。。只能给你0.5分了。

图片

商汤商量:全对。。而且人聪明,他不说出处哈哈哈哈哈,看看上面那位老哥,这就叫言多必失。。。+1分。

图片

星火:?你这属实是en凑了。。。硬编啊。。0分。

图片

GPT4:月落乌啼霜满天,我说你丫真能编...五言,会数数吗 。。。0分!

-

4轮比赛全部结束。

文心一言2分,智谱清言2分,商汤商量2分。三者并列第一!撒花???

通义千问1.5分,屈居第四。

星火和GPT4两位难兄难弟,全程0分,并列倒数第一。

这个小比赛,虽然很不精准,但是也能看出一些中文语境下特有的语境,强如GPT4.也只能一题答不上来,充分说明,国产大模型,极其、且非常有必要。

不过,星火兄弟,你这是个什么情况。。。

最后,马上也中秋&国庆双节啦!

看完了AI玩灯谜,我也来给粉丝们办一个中秋小活动猜灯谜活动嘿嘿,第一个猜对全部的这四个灯谜并在评论区留言的,我会将你置顶,到时候请凭截图来找我领取88元中秋红包嘿嘿,小小心意,不成敬意。

题目如下:

图片

欢迎踊跃留言,一起猜灯谜~

以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,并给我个星标⭐~感恩。


作者的公众号二维码丨扫一扫,关注我

努力分享一些很酷的AI干货

3

相关文章