百度表示,Ernie 3.5在关键指标上胜过了ChatGPT和GPT-4

随着中国百度公司宣布其人工智能模型Ernie 3.5在关键测试中击败了流行的OpenAI的ChatGPT和GPT-4,AI市场的竞争日趋激烈。该中国互联网公司在三月份的一次活动上推出了Ernie机器人。CEO李彦宏在宣布时表示,这一新产品还不完美,将随着人们的使用和反馈不断改进。在揭示Ernie机器人后的一小时内,百度表示约有30,000家企业客户加入了等候名单以获得聊天机器人。

与此同时,百度自推出Ernie机器人以来一直在公开测试。这个建立在中国搜索引擎基础AI模型Ernie上的聊天机器人是通过广泛的数据进行训练的。另一方面,ChatGPT是基于OpenAI的GPT 3.5模型。百度表示,它的AI模型击败了OpenAI最新、最先进的模型GPT-4。它指出,Ernie 3.5在中文语言测试中表现优于OpenAI的产品。

百度声称Ernie 3.5在多个关键领域优于ChatGPT

这家中国公司是在引用中国科技日报的一份报告时做出这一声明的。根据该报告,一个“少样本评估”显示,Ernie 3.5在多个测试集中胜过了ChatGPT。三个评估基准是AGIEval、C-Eval和MMLU。微软研究使用AGIEval评估基准来检查模型在“以人为本”的标准测试中的表现水平。重点是20个官方、公共和不同的资格考试,如美国的SAT考试和中国的高考。还包括律师资格考试、美国GMAT、GME等。此外,伯克利大学、哥伦比亚大学、伊利诺伊大学厄巴纳-香槟分校和芝加哥大学联合发布MMLU。这个大规模的多任务语言理解测试评估了模型的英语跨学科专业能力。这个测试涵盖了社会科学、人文科学、科学、技术、工程和数学(STEM)等不同的教育领域。

此外,c-Eval评估是一个包含13,948个多项选择题,涵盖53个科目的中国基础模型评估。这个评估基准是清华大学、爱丁堡大学和上海交通大学的联合努力创建和发布的。

AGIEval和C-Eval测试的结果显示,Ernie 3.5取得了比其他大型模型更高的分数,包括ChatGPT,超过了GPT-4。此外,百度的AI模型还超越了ChatGPT的40.27分和GPT -4的56.96分。Ernie 3.5获得了惊人的64.37分,排名第一。对于中国的c-Eval评估,Ernie 3.5也超过了ChatGPT。虽然这个中国AI模型的得分最高,达到了71.93分,但ChatGPT的得分为51.70分,GPT-4的得分为68.57分。此外,百度提到更多的结果表明,Ernie 3.5具有“出色的中文能力”,并且超过了ChatGPT和GPT-4。

We will continue to update 算娘; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

NFT

Yuga Labs 为 NFT 市场中的创作者版税站出来

五月,韩国金融监督服务(FSS)将与美国主席加里·根斯勒举行会谈,探讨非同质化代币(NFTs)的潜力,为两国提供宝贵的洞察和合作机会

区块链

釜山正在开发一个与以太坊兼容的主网,以成为一个“区块链城市”

公共区块链开发是在釜山数字资产交易所设立促进计划和未来计划下进行的,重点是使釜山成为一个区块链城市

区块链

CryptoQuant的母公司由Atinum Investment领投的一轮融资筹集了650万美元

最新一轮融资使公司的总融资额达到900万美元

区块链

韩国Hana Bank与BitGo合作进入加密货币托管业务领域

韩国最大的银行之一,KEB Hana Bank,通过与加密资产托管公司BitGo的新合作,进入数字资产托管业务

资讯

🌐引入Orbit Bridge Hack:一个巨大的漏洞震动了Claytont生态系统🏦💥

各种韩国机构,如国家情报院,正在积极调查8千200万美元的轨道桥黑客事件,以便在未来整改和防止类似事件发生

政策

“韩国民主党要求国会候选人披露加密货币持有情况”

2024年,韩国将举行大选,全国议会的300个席位都将重新选举