叶根友字体:百度文心一言与Chat GPT对比,性能、准确度及未来发展分析

体验了一下百度的大语言模型“文心一言”,并把相同的问题问了一下基于GPT4的Chat GPT和Newbing,简单说一下感受:

1. 问题的响应速度上,文心一言挺快的,和我使用Chat GPT Plus帐号基本一样的速度,提问之后几秒钟内就会开始回复;

叶根友字体:百度文心一言与Chat GPT对比,性能、准确度及未来发展分析

叶根友字体:百度文心一言与Chat GPT对比,性能、准确度及未来发展分析

2. 回答问题的准确度上,特别是涉及到一些事实性的数据上,文心一言和New bing都容易犯错误。叶根友字体观察到,由于Newbing可能是因为直接抓取网页数据的原因,因为引用的信源不准确,给出的回答也是漏洞百出,而且很难纠正回来。百度的文心一言有的时候很准确,有的时候也是一本正经的胡说八道,好在经过人的反复提示最终可以回答出问题的正确答案(可附带说的信息又错误了)。这方面,Chat GPT回答的信息都是准确的,只不过可能训练用的语料都是外网信息,所以列举参数信息也是海外版本机型的信息。

叶根友字体:百度文心一言与Chat GPT对比,性能、准确度及未来发展分析

叶根友字体:百度文心一言与Chat GPT对比,性能、准确度及未来发展分析

叶根友字体:百度文心一言与Chat GPT对比,性能、准确度及未来发展分析

3. 文心一言在更具创造性的问题上的回答内容可操作性和详细程度明显不如Chat GPT,而叶根友字体认为其回答内容非常模板化,总觉得就是“听君一席话, 胜似一席话”。而Chat GPT则显然更对题、更详实。

4. 文心一言比Chat GPT强一点的是,它直接集成了AI绘画能力“文心一格”,可以支持在对话框中输入绘画指令,并返回AI生成图像结果,而Chat GPT目前还只能回答文本内容。不过只是百度这个绘画效果与基于Open AI 的Bing Creator相比差距非常明显:前者算小学一年级水平,而后者起码算高中水平了。

叶根友字体:百度文心一言与Chat GPT对比,性能、准确度及未来发展分析

叶根友字体:百度文心一言与Chat GPT对比,性能、准确度及未来发展分析

叶根友字体:百度文心一言与Chat GPT对比,性能、准确度及未来发展分析

总体来说,我看王小川今天也官宣开启大模型创业、成立“百川智能”。前有王慧文、后有王小川,更加多的大佬加入这个行业,让叶根友字体推测国产大模型未来将更加可期!同时,在不断技术进步与迭代过程中,相信体验也会越来越好。


叶根友字体:百度文心一言与Chat GPT对比,性能、准确度及未来发展分析

相关网站

叶根友字体

叶根友字体官方网站,隶属于贤书阁文化创意有限公司,七年多来制作了150多套字体,目前已经成为设计师必备字体,成为字体界继方正、文鼎、汉仪后的一匹黑马。 其中“叶根友疾风草书”、“叶根友刀锋黑草”、“叶根友蚕燕隶书”深受设计师喜爱。贤书阁文化...