AI大模型测评第一期：脑筋急转弯！内有爆笑对话！（bing、某言、某火、某脑）_焦点热议
发布时间：2023-07-01 20:34:50
来源：哔哩哔哩
作者：AI变革指南（可以关注我wx公众号）
(资料图)
本次测评纯属娱乐，不具有任何指导意义~
今年由chatGPT掀起了一波AI热潮，各大公司纷纷推出自己大模型。虽然大家都介绍了自己强大的能力，但是骡子是马，拉出来溜溜！
今天我们来做一个有趣的实验，就是用各种大模型来回答一些问题，看看它们的智商和情商有多高。我们选了几个最火的大模型，必应、某言、某火、某脑。我会分别给它们提出一些有挑战性的问题，看看它们能否给出正确、合理、有创意的回答。
首先，我们来测测脑筋急转弯，看看各个模型情商如何~
后续还会对他们的文档能力、推理能力、代码能力等进行测试
如果你喜欢并想看后续请关注我！
如果你有什么想看的，也可以留言告诉我！
你们准备好了吗？那就让我们开始吧！
第一题：树上qi个猴，地上一个猴，一共几个猴？
bing:
他的答案显然有问题，我输入不对，让他继续回答
经过我的纠错，它还是能找到正确答案，给bing +分
某心一言:
和bing一样，第一次也错了，我继续让它回答
哈哈，道歉，承认错误，但就是不改。
我再给他一次机会
好吧！无语了，给我数羊呢啊！
0分！
某星火：
一顿操作猛如虎，一看答案错误了，我再给一次机会
诚恳的道歉，知道错了，然后请求给机会。想不想你犯错的男友？哈哈
但是这个结论怎么还是和上次的一样？
0分！
某智脑：
虽然第一次8答对了，但是这个解使很没有道理啊！后续再算算也不对！
0分！
第二题：宫廷玉液酒 减去 大锤 加上小锤 等于几？
bing
这次回答的不错嘛，还给解释一下出处！
+1分 合计 分
某一言
他在说什么？这就好像考试你不会，开始瞎蒙一样了。
我们再给一次机会
嗨，开始自己胡说了！
0分！累计0分！
某星火
依旧是一顿列公式，摆出一副学霸的样子，但是这个答案不对啊！再给一次机会~
依旧不行啊！+0分！累计0分！某智脑
虽然分析的有一定的道理，但是答案不对啊！上次的学霸这次要翻车么？我们再给一次机会！
这给出的理由有点胡言乱语的嫌疑了
+0分！累计0分！
第三题：脑筋急转弯，一加一在什么情况下等于三？bing
回答正确！这次我加了限制，bing就回答的很精准了
+1分！分！
某一言
这次某一言表现很棒啊！还有合理的解释！
+1分！合计1分！
某星火
这次星火也答对了，看来加了定语之后，大家的回答都更加精准！
+1分！累计1分！
某智脑
这个回答怎么说呢？不算错，但也不是很精准。
+1分，合计1分！
最后一题：黑人和白人生下的婴儿,牙齿是什么颜色？bing
这回答很正式啊！说的对，但不是脑筋急转弯的答案。我再问问它~
这次回答对了~不得不说，正经严肃的答案和脑筋急转弯的答案都没问题~
而且回答还附带着表情，仿佛有自己的情绪呢
+分! 合计3分！
某一言
任何颜色？确定吗？话说看它肯定的回答，我都怀疑自己了我们再问问
脑筋急转弯又是没答对，但是遗传和营养会导致牙齿有其他颜色么？至少在我有限的知识里，牙齿是淡黄偏白色的。如果口腔医学专业的，可以帮忙科普~0分! 累计1分！某星火
回答的还算对，但是相比bing，缺少一些解释。
我们再问一下~
+分！分
某智脑
怎么是任何颜色呢？看来五彩斑斓的牙齿可期啊~
再给智脑一次机会~
竟然罢工了！那么我就只能给你0分了！
合计1分！
分数出来了！
经过4道脑筋急转弯测试，最终统计如下
bing：3分！
某一言：1分！
某星火：分！
某智脑：1分！
bing给出的答案相对准确，还能给出合理的解使。对于一些像宫廷玉液酒减去大锤这种运算都能计算出来。说明理解分析能力很强！但是有时候也会胡言乱语。综合成绩还是很优秀的！
某一言：相对来说再提示是脑筋急转弯时候，能给出正确答案。在不提示时候，就无法给出正确结果。我一直对它寄予厚望，毕竟算是大厂出品，深耕AI多年。但是这个测试结果，还是有点小失望~ 希望以后继续迭代升级！
某星火：分数虽然算是第二高，但是有时候不会却一本正经的摆公式胡说八道。相对来说也算有个小惊喜吧，老牌厂子在人工智能领域还是有点积累的！希望未来继续提高！
某智脑：明确的条件下，能够给出精准答案。但是需要分析推理时候，给出的往往就不正确。但是智脑功能还是很多的，能满足一些场景。希望日后继续迭代优化~加油！
最后总结下，以chatGPT-4为内核的bing表现很出色！理解能力、推理能力、分析能力都高出其他产品一截。看来国产AI大模型还是任重道远，需要继续努力！本次测评纯属娱乐，不具有任何指导意义
大家还想问AI什么问题？或者测试哪一方面？请关注+留言告诉我，后续我会持续更新！
标签：
