文心一言初体验,和ChatGPT语言理解能力比较


百度旗下AI大模型文心一言宣布向全社会全面开放,所有用户都可以体验这款AI大模型了。要比较这两个语言模型,我们先设计好题目。

第一个考验,语义理解

题目1:如果我给你一个题目,你可以帮我用python实现它吗?我的题目是如何用一行代码实现九九乘法口诀表。
题目2:请根据这行python代码,提供完整的可以执行的代码。

重点是让语言模型能否根据第一个题目给出来的代码,接着编写完整的代码。

首先看文心一言的表现
在这里插入图片描述
从回复上看,完全没理解到语义,回复要求提供代码。

再来看看chatGPT的表现
在这里插入图片描述
我们暂且先不论答案的准确性或者准确度,单从语义理解角度看,chatGPT能根据上文问题,理解到下一个问题想表达的意思。这块上面,文心一言略有欠缺。
PS:chatGPT是3.5版本的模型

第二个考验,历史问题的回答

在不考就真实性的前提下,根据两个语言模型的回答,作为旁观者客观比较。
首先还是看文心一言的表现
在这里插入图片描述

再来看看chatGPT的回答
在这里插入图片描述
我个人觉得chatGPT的回答更加中性、委婉一些,条理性更清晰,也更加的客观一些。

当然,每个人的理解、认知不一样。但是从这两次比较来看,文心一言还需要再继续努力,相较来说,chatGPT更胜一筹。

推荐阅读

猜你喜欢

转载自blog.csdn.net/weixin_37813152/article/details/132624728