客观评测 豆包大模型 排名国产第一 智源更新大模型排行榜 (豆包口感)

文章编号:46647 资讯动态 2024-12-10 智源研究院豆包大模型AIGC

6月中旬,智源研究院旗下的 FlagEval 大模型评测平台发布最新榜单:在有标准答案的“客观评测”中,GPT-4 以76.11分在闭源大模型中排名第一;Doubao-Pro(豆包大模型)以75.96分排名第二,同时也是得分最高的国产大模型;其后依次是 ERNIE 4.0、Baichuan3、Moonshot-v1。在开放问答等“主观评测”中,Doubao-Pro 同样排名第二,得分超过 GPT-4o 和 GPT-4。

智源更新大模型排行榜:大模型“客观评测”排名国产第一

图:豆包大模型在 FlagEval 客观评测中获综合评分第二(2024年6月)

FlagEval 大模型评测平台由智源研究院与多个高校团队共建,以人类认知能力的发展阶梯为基准,对齐大模型所能达到的认知水平。FlagEval 构建了大量原创的非公开评测集,确保评测质量和公正性。自2023年6月上线以来,FlagEval 已完成了1000多次覆盖全球大模型的评测。

Doubao-Pro 是由字节跳动自主研发的大语言模型,于5月15日正式发布。本期 FlagEval 大模型排行榜,是豆包大模型在公开评测中的首次亮相。

测试成绩显示,豆包大模型的数学能力、知识运用、任务解决等多项能力在客观评测和主观评测中都有着出色表现。其中,知识运用和数学能力得分排名客观评测第一、主观评测前三,任务解决测试得分在主客观评测中均排名前三。

数学能力是评估大模型是否“聪明”的一个重要维度。此前,复旦大学自然语言处理实验室就2024 年高考数学题对13家主流大模型产品进行评测,豆包的数学高考新课标 II 卷答题获得最高分,客观题正确率达到 74.66%,成绩优于GPT-4o及国内多款大模型产品。

智源更新大模型排行榜:大模型“客观评测”排名国产第一

据悉,豆包大模型是国内使用量最大、应用场景最丰富的大模型之一,日均处理 token 达到千亿级。其同名AI对话助手“豆包”,在苹果APP Store和各大安卓应用市场的AIGC类应用中下载量排名第一。目前,豆包大模型正在通过字节跳动旗下的火山引擎向企业市场开放服务,已经与OPPO、荣耀、小米、三星、华硕等智能终端厂商建立合作。

版权文章,未经授权禁止转载。详情见 转载须知 。

全局中部横幅
温州工作服定做

温州明克服饰有限公司服务电话:13587452625,主要从事:工作服、幼儿园园服、学校校服、保安服、行政服、酒店制服、护士服装、商务服装、休闲服装等定做,公司秉承“保质保量,价格优惠,同质比价,同价比质”经营理念。

吉号网吉号吧

吉号网-北京移动,北京联通,北京电信网上选号网站。销售各类北京移动全球通、北京动感地带、北京神州行、等手机号码,手机靓号,移动号码,联通号码。网上选号,送货上门,满意付款。

红杉树地板唯一官方网站

隔离线品牌设计-GalaxyDesign-网站管理系统8.0

好教练网

好教练网致力于帮助消费者找到身边的好教练(不同领域的专家),享受健康、便捷的现代生活方式,致力于帮助好教练改善电子商务体验,带来新的生意。生活在上海,好教练就在您身边!

W.biz

www.W.biz|商业搜索引擎,是中小企业实现采购搜索和网络营销的B2B电子商务平台。帮助中小企业更快,更有效的达成交易。

医用制氧机品牌厂家,中心供氧系统,空气消毒器,医用净化,工业制氧机,制氮设备

杭州盛大高科技机电有限公司是一家专业从事室内空气净化消毒产品、医疗气体设备和工业气体设备的研发、生产及经营为一体的高新技术企业。

好网站

好网站精选优质的网站,网站大全,聚合全网优秀站点网址,网址大全和AI网站、AI工具,让上网更加简单高效,精彩一触即达!

自如驿

自如驿是自如旗下的世界青年欢乐旅行驿栈,旨在为全世界年轻人提供打破国界、亲密交流的旅行居住空间。独创3Q睡眠系统、五星级卫浴及娱乐公区。

企友通

企友通商业运营系统是书生公司推出的以中小微企业营销为核心的企业数字化系统,从慧抖销(抖销三剑客:慧抖销,慧抖建,慧抖拍)短视频营销和新开元慧销售为核心的企业获客、触达、客户管理SCRM等数字化系统延伸到内部管理和供应链管理

地方网

地方网免费下载传奇版本、传奇工具、传奇教程、传奇源码、传奇补丁、传奇客户端、传奇素材、私服版本、私服工具、手游版本、网页游戏、端游、单机游戏、棋牌源码、GM工具等稀有资源!

惠车网

惠车网为大家提供最新的专业汽车讯息,主要栏目有用车,促销,车评,试驾,动态,新车,经销,车界,头条,行业,营销,资讯等。

北京北排膜科技有限公司

北京北排膜科技有限公司主要从事水处理领域膜技术及相关产品的研发、设计、制造、OEM、ODM、系统集成及运维服务等,由北京排水集团旗下北京北排装备产业有限公司与中信集团旗下中信环境技术有限公司合资组建。

全局底部横幅