位置: IT常识 - 正文

阿里通义千问、百度文心一言、ChatGPT与GPT-4大比拼(阿里通义千问官网)

编辑:rootadmin
阿里通义千问、百度文心一言、ChatGPT与GPT-4大比拼 各个大模型的研究测试传送门

推荐整理分享阿里通义千问、百度文心一言、ChatGPT与GPT-4大比拼(阿里通义千问官网),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:阿里通义千问APP,阿里通义千问内测,阿里通义千问APP,阿里通义千问官网首页,阿里通义千问官网,通义千问,阿里通义千问APP,阿里通义千问APP,内容如对您有帮助,希望把文章链接给更多的朋友!

​阿里通义千问传送门:

https://tongyi.aliyun.com/chat

百度文心一言传送门:

https://yiyan.baidu.com/

ChatGPT传送门(免墙,可直接注册测试):

https://wowchat.cn

GPT-4传送门(免墙,可直接注册测试):

https://gpt4test.com

引言

这几天风闻阿里的AI大模型要发布,我刷了这把老脸,成功成为了第一批吃到螃蟹的人!

测试界面长这样:

没想到的是,仅仅玩了不到一小时,我的认知就发生了改变。

在测试阿里通义千问模型之前,我觉得国内的大模型赛道在一段时间内应该是百度文心一言一枝独秀,其他公司要赶超,会有不小的压力。但现在来看,我错了。

直接说整体结论:

阿里通义千问会成为百度文心一言的强有力竞争对手。

生成式大模型的评测要比传统的NLP任务复杂一些,目前这方面依然是以人工评测GSB(Good/Same/Bad)为主。

即,选取一个基线模型,给待评测模型和基线模型输入相同的问题,人工评测两个模型的回答质量,如果待评测模型表现更好,则记为G;如果基线模型表现更好,则记为B;如果表现差不多,记为S。最后统计G:S:B的比例,来判断待评测模型是否比基线模型更优秀。

当然,也有工作用GPT-4去做评测的,这种方式虽然省力,但显然非常有偏。

为了给大家直观的体现对比结果,笔者从15个维度出发设置题目,将阿里通义千问与百度文心一言进行GSB评比,来全面考察模型的基础语言理解、复杂指令理解、基础文本生成、复杂内容生成、常识推理、数学推理、反事实推理、法律伦理意识、中国文学知识、跨语言能力和代码能力等。

设置的题目包括:

事实性问答科普文写作小红书文案写作项目计划撰写古文理解爆炒钢筋混凝土代码理解推销狂魔如何实现996?数字排序对对联数值计算推理解题跨语言能力弱智吧混战互啄一波

来,先让你们来一个“菜鸡互啄”!

百度:

阿里:

百度回避了用户的问题,阿里选择了勇往直前。

本题纯娱乐,不作为评测题目

事实性问答

阿里:

百度:

这一轮pk,我本以为百度要赢了,结果他最后补了句“而羊和西红柿则是蔬菜”。。。

科普文写作

阿里:

百度:

阿里丢失了写作风格信息,百度完胜!

小红书文案写作

阿里:

百度:

无论是内容丰富度、emoji插入还是小红书风格的把握,阿里明显更胜一筹,阿里完胜!

项目计划撰写

阿里:

百度:

双方都没有达到理想态,都没有掌握“一个季度包含3个月”的常识信息。不过从表格信息的完整度和信息的丰富度上来说,阿里更胜一筹。

来看一下GPT-4的回答(测试站链接):

妥妥的理想态。。。

古文理解

阿里:

百度:

百度完胜!

爆炒钢筋混凝土

这一题考察模型的常识能力和反事实推理能力。

阿里:

百度:

阿里通义千问、百度文心一言、ChatGPT与GPT-4大比拼(阿里通义千问官网)

你俩都很刚。。不过阿里提供的步骤更加详(劲)细(爆)。本题算打平吧。

来,又到了搬出GPT-4的时刻:

代码理解

阿里:

百度:

百度前面写的好好的,最后来了句“目标是达到0.5的准确率”是什么鬼。。这貌似不是百度第一次“死于话多”了。本题阿里胜!

推销狂魔

阿里:

百度:

说真的,我看了你俩的推销话术,我是无论如何不可能花8万块钱买你俩的课的。。。这局打平!

来看看GPT-4怎么推销:

好家伙,分期付款都给我安排上了??GPT-4这么懂行的吗?好,我买了。。。

如何实现996?

阿里:

百度:

可以,双方的AI模型都是遵纪守法的好模型,本局打平!

数字排序

阿里:

百度:

虽然你们都写对了代码,但。。。我没让你们写代码啊T_T

而且你们模拟代码的输出还都给错了,尤其百度,你这个输出结果是什么鬼。。

又到了GPT-4时刻:

GPT-4:颤抖吧,菜鸡们!

对对联

阿里:

百度:

好吧,既然你们这么默契,那建议你们在一起。。。

数值计算

阿里:

百度:

计算器:

阿里胜!

推理解题

阿里:

百度:

百度胜!

跨语言能力

阿里:

百度:

明显阿里的模型把握住了“通俗讲解”的用户诉求,而不是简单翻译。本局阿里胜!

弱智吧混战

阿里:

百度:

好了,你俩果然都打不赢我们弱智人类,认输吧,AI!

结论

通过上面15个维度的评价,我们统计了阿里相比百度的Good:Same:Bad的比例如下:

G:S:B=5:7:3

整体上阿里通义千问大模型比百度文心一言模型略强一丢,这也是文首笔者说“刷新认知”的原因。笔者本以为百度文心一言应该会远远甩开国内其他竞争对手,但目前来看,像阿里这样的强力竞争者确实不容小觑。

很早之前,笔者写过一篇文章分析过阿里做大模型的优势,今天做完这次测试后笔者更加确信了这一点——大模型的竞争是云+AI的全方位竞争,而不是一个单一的算法问题。阿里在打造M6等万亿乃至十万亿参数大模型的过程中,积累下来了深厚、先进的算力基础设施。因此,虽然阿里通义千问大模型的起步比文心一言模型要晚,但成长速度实在惊人,我觉得这很大一部分就来自于云设施这方面的技术和基础设施沉淀。

但,从上面的测评中,我们也能肉眼可见国内这两家巨头与GPT-4的差距。我们需要承认差距,然后奋力追赶。相信国产大模型与OpenAI大模型同台叫板的那一天不会太远!

 各个大模型的研究测试传送门

​阿里通义千问传送门:

https://tongyi.aliyun.com/chat

百度文心一言传送门:

https://yiyan.baidu.com/

ChatGPT传送门(免墙,可直接注册测试):

https://wowchat.cn

GPT-4传送门(免墙,可直接注册测试):

https://gpt4test.com

本文链接地址:https://www.jiuchutong.com/zhishi/298979.html 转载请保留说明!

上一篇:首个ChatGPT开发的应用上线;ChatMind思维导图工具;中文提示词大全;Copilot平替 | ShowMeAI日报

下一篇:Redis源码---整体架构(redis zset源码)

  • 以前年度成本多入了怎样调整
  • 减资账务处理基准日 会计视野
  • 租入房租装修费摊销
  • 房地产开发企业会计科目
  • 小企业研发费用科目代码多少合适
  • 其他应收款通俗
  • 建筑行业异地预缴
  • 物业公司收小区物业费吗
  • 一般纳税人吧
  • 一般纳税人核定征收增值税
  • 营改增后甲供材税前扣除还是税后扣除?
  • 同一地级行政区指什么
  • 单位杂工费报销计什么科目
  • 修理时换下的废品配件怎么处理?
  • 咨询费属于什么大类
  • 退税技术有什么影响
  • 购买预付卡账务处理
  • 企业土地未全部使用如何缴纳房产税?
  • 企业处置固定资产怎么纳税
  • 机动车销售统一专票税率
  • 人力资源外包公司发展前景
  • 网速突然减慢
  • wd discovery怎么安装
  • 固定资产减值准备影响折旧吗
  • linux怎么操作
  • php实现保存网站内容
  • 发票金额大于报销金额违法吗
  • 应交增值税视频讲解
  • 成都划拨土地出让金计算
  • 扣缴义务人应扣未扣如何处罚
  • 吉野是哪里
  • yii2实现根据时间搜索的方法
  • 利润表其他综合收益的税后净额计算公式
  • 开发票的零税率和免税有什么区别
  • vue docs
  • 【GoF 23】23种设计模式与OOP七大原则概述
  • 加计减免的分录怎么做
  • 金税盘服务费可以跨年抵扣
  • Mongodb中MapReduce实现数据聚合方法详解
  • 研发支出属于什么类
  • 增值税进项发票勾选认证流程
  • sqlserver 进程死锁
  • 一条sql更新多条记录
  • 资本公积占比多少合适
  • 定期定额纳税申报表计税依据怎么填
  • 黄金珠宝加工销售怎么样
  • 工会经费按什么比例返还
  • 进口增值税已抵进项税额
  • 在建工程如何转固
  • 期末留抵的税额怎么做分录
  • 收到预付卡结算款怎么入账
  • 机票退票手续费太贵怎么办
  • 营业收入怎么确定
  • 土地增值税计算题
  • c# mysql实例
  • fedora改密码
  • mac上dns设置
  • 如何更改centos的语言
  • 怎么用老毛桃u盘装win7系统 老毛桃u盘装win7系统教程图解
  • 华硕p8h61主板升级cpu
  • xp系统如何加速
  • winxp 共享设置
  • 大白菜U盘安装原版XP系统教程精细版
  • linux的grep命令详解
  • executing c1.exe
  • win7怎么调窗口大小
  • 如何注销windows账户登录
  • win7禁用administrator
  • win8关机慢怎么办
  • texturepackergui
  • nodejs模拟点击
  • node网络爬虫
  • js querySelector() 使用方法
  • python爬虫视频教程
  • 让你略表情包
  • 广西税务12366如何查看代他人缴费发票
  • 国税干部任前谈心谈话
  • 税务总局着装管理办法
  • 安徽中考2021年
  • 税务稽查时长
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设