百度表示,Ernie 3.5在关键指标上胜过了ChatGPT和GPT-4

随着中国百度公司宣布其人工智能模型Ernie 3.5在关键测试中击败了流行的OpenAI的ChatGPT和GPT-4,AI市场的竞争日趋激烈。该中国互联网公司在三月份的一次活动上推出了Ernie机器人。CEO李彦宏在宣布时表示,这一新产品还不完美,将随着人们的使用和反馈不断改进。在揭示Ernie机器人后的一小时内,百度表示约有30,000家企业客户加入了等候名单以获得聊天机器人。

与此同时,百度自推出Ernie机器人以来一直在公开测试。这个建立在中国搜索引擎基础AI模型Ernie上的聊天机器人是通过广泛的数据进行训练的。另一方面,ChatGPT是基于OpenAI的GPT 3.5模型。百度表示,它的AI模型击败了OpenAI最新、最先进的模型GPT-4。它指出,Ernie 3.5在中文语言测试中表现优于OpenAI的产品。

百度声称Ernie 3.5在多个关键领域优于ChatGPT

这家中国公司是在引用中国科技日报的一份报告时做出这一声明的。根据该报告,一个“少样本评估”显示,Ernie 3.5在多个测试集中胜过了ChatGPT。三个评估基准是AGIEval、C-Eval和MMLU。微软研究使用AGIEval评估基准来检查模型在“以人为本”的标准测试中的表现水平。重点是20个官方、公共和不同的资格考试,如美国的SAT考试和中国的高考。还包括律师资格考试、美国GMAT、GME等。此外,伯克利大学、哥伦比亚大学、伊利诺伊大学厄巴纳-香槟分校和芝加哥大学联合发布MMLU。这个大规模的多任务语言理解测试评估了模型的英语跨学科专业能力。这个测试涵盖了社会科学、人文科学、科学、技术、工程和数学(STEM)等不同的教育领域。

此外,c-Eval评估是一个包含13,948个多项选择题,涵盖53个科目的中国基础模型评估。这个评估基准是清华大学、爱丁堡大学和上海交通大学的联合努力创建和发布的。

AGIEval和C-Eval测试的结果显示,Ernie 3.5取得了比其他大型模型更高的分数,包括ChatGPT,超过了GPT-4。此外,百度的AI模型还超越了ChatGPT的40.27分和GPT -4的56.96分。Ernie 3.5获得了惊人的64.37分,排名第一。对于中国的c-Eval评估,Ernie 3.5也超过了ChatGPT。虽然这个中国AI模型的得分最高,达到了71.93分,但ChatGPT的得分为51.70分,GPT-4的得分为68.57分。此外,百度提到更多的结果表明,Ernie 3.5具有“出色的中文能力”,并且超过了ChatGPT和GPT-4。

We will continue to update 算娘; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

项目

矿工:他们是区块链世界的超级英雄!

很多矿工喜欢挖掘拥有原生代币的新项目,尤其是那些挖矿占比高、算力和收益成比例相符合的项目该消息由Maggie@Foresight Vent...

DeFi

Filecoin(FIL)继续恢复,在一天内上涨16%

Filecoin代币近24小时内经历了大幅价格上涨,涨幅超过16%

市场行情

Storj、Filecoin和Solana引领七月首周加密货币市场的涨势

STORJ是一种基于加密货币支持的云存储平台的本地代币,在过去一周上涨了15%,超过了比特币和以太币等其他数字资产

比特币

今日最佳加密货币的搜寻

随着比特币和以太币最近经历一些波动后,投资者正热切寻找当下最有前途的加密货币投资选择

市场行情

eToro在SEC的备受关注的诉讼中仍然致力于加密货币

eToro的评论并非毫无依据;考虑到该平台提供了SEC认定为证券的一些代币,包括Cardano(ADA)、Polygon、Solana、Algorand、Fi...

区块链

Filecoin存储利用率在第二季度超过7%:报告

一个专为区块链设计的内容传递网络也正在制作中