别拿GPT4对比了,文心一言和ChatGPT对比评测,看谁更懂中文

nZone 2023年5月7日更新于1 年前 共891字 预计4分钟 评论 391

文心一言和ChatGPT对比,哪家强?我们先介绍并梳理下关注的热度,后面再实测对比。

GPT-4与文心一言对比

最近几个月,ChatGPT大火,根据百度指数查看热度,ChatGPT是OpenAI公司在2022年11月30日发布,市场只是小震动,反响并不热烈,直到1月底有媒体开始关注并报道,热度逐渐升温,那时刚好是春节,2月8日正月初八达到搜索顶峰,这个搜索体量与“王力宏”相当,而”王力宏“不过是”吴亦凡“的一半。

ChatGPT与文心一言热度

文心一言是百度推出的全新一代知识增强大语言模型,于2023年3月16日开发布会,一发布时热度即到顶峰,接近ChatGPT顶峰时的三分之二,之后便平稳下降,目前日常热度是超过二分之一。

ChatGPT与文心一言实测对比

最近网站积累了一些问题,访问卡顿,需要维护优化下,我就用这个项目来测试文心一言和ChatGPT了。先说明版本都是免费的,百度文心一言是4月27日发布的v1.05内测版,ChatGPT则是5月3日更新的3.5版本,数据库日期是截止到2021年9月,是公开发布的ChatGPT3.5,而不是付费的GPT-4.0,看网上有人拿文心一言和GPT-4对比,这是很不公平的。

中文词语的区别,对比下这些词:科技趋势观点、科技趋势见解、科技趋势洞察、科技趋势观察、科技趋势分析,接着问:“科技趋势见解”和“科技发展见解”区别大吗,再接着问:“科技趋势见解”怎么缩写,词意不会变,要求写成4个字,这里“文心一言”稍微好点。

ChatGPT对比文心一言

问网站优化方面专业的问题,毕竟百度是专业的搜索引擎,有这基因,所以这方面应该会比较有优势。问个标点的用法,百度怎么转移思路,说要用小于号当空格,闹下网小编看得一脸懵逼,看ChatGPT回答挺好的,它们的回答都不是针对某个搜索引擎的。

实测ChatGPT对比文心一言

接着抛出一个示例给它,我假装文心一言是对的,追问标题会不会太长了,好像说了个标准的通用答案,而ChatGPT直接给出解决方案,虽然也不算满意,但回答有联系上下文,有针对性,似乎更有诚意点。

最后再问个英文词语的区别,其实主要是大小写和复数的区别。这里两个回答差别不大。

最后总结,文心一言目前还是内测版,总体觉得还没达到一个月前发布会上的效果,对于上下文理解能力还欠缺了点,问法上要很清晰,尤其要加标点,不然容易翻车,看来百度还有很长的路要走,而ChatGPT虽然是国外的,但对中文语意的理解能力真不赖,它能大概判断出你问的意图。对此,你是怎么看的呢,欢迎在评论区分享你的看法。

weinxin
公众号
闹着玩下网
avatar

发表评论

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: