您的当前位置:首页 > 百科 > LiveBench 最新榜单:阶跃星辰位列中国大模型第一 正文
时间:2024-12-23 13:11:09 来源:网络整理 编辑:百科
近日消息,国际权威榜单 LiveBench 官网公布了最新的语言大模型测评结果,阶跃星辰自研的万亿参数语言大模型 Step-2 的技术表现位列中国基座大模型第一,成绩逼近 OpenAI 的 o1-mi
近日消息,新榜国际权威榜单 LiveBench 官网公布了最新的单阶第语言大模型测评结果,阶跃星辰自研的跃星万亿参数语言大模型 Step-2 的技术表现位列中国基座大模型第一,成绩逼近 OpenAI 的辰位 o1-mini-2024-09-12,超越 gpt-4o-2024-08-06 、列中gemini-1.5-pro-002 等国际主流模型,模型是新榜唯一进入榜单前十名的中国语言大模型,位列全球第五。单阶第另外,跃星同时上榜的辰位中国大模型公司还有通义千问和 DeepSeek。
LiveBench 是列中由图灵奖得主、Meta 首席 AI 科学家杨立昆(Yann LeCun)联合 Abacus.AI、模型纽约大学等机构联合推出的新榜大模型测评基准。LiveBench 从包括数学、单阶第推理、跃星编程、语言理解、指令遵循和数据分析在内的多个复杂维度对模型进行评估,采用新颖的数据来源并保持每月更新,被誉为「世界上第一个不可玩弄的 LLM 基准测试」。
值得关注的是,Step-2 在 IF Average(Instruction Following)一项表现突出,超越包括 o1-preview-2024-09-12 在内的所有国内外语言大模型。这意味着,Step-2 在语言生成上对细节有最强的控制力,模型能够更好地理解和遵循人类指令,捕捉到模糊需求背后用户的真实意图,对通用及特定领域知识的覆盖上都有更好的表现。比如当使用 Step-2 创作古诗词,模型在发挥创意的同时能够对字数、格律、押韵、意境做到精准把握。
据了解,今年 3 月,阶跃星辰发布了 Step-2 语言大模型预览版,这是国内首个由创业公司发布的万亿参数模型。目前,阶跃星辰开放平台为开发者提供 Step-2 的 API 接口,该公司的 C 端智能助手「跃问」也已经接入了 Step-2 万亿参数语言大模型,用户在跃问 App 和跃问官网(https://yuewen.cn)皆可体验。
pgc2024结束大合照,你们能找到4am在哪吗?2024-12-23 13:05
BioWare并不觉得《质量效应:仙女座》有多差2024-12-23 12:49
[JR热议]最受欢迎战队投票:AG断崖式领先,狼队不敌XYG,你怎么看?2024-12-23 12:42
合作生存恐怖游戏《CRYO》Steam页面 发行日期待定2024-12-23 12:42
德容本赛季出战的前十场比赛参与进球数为0,对阵马洛卡传射建功2024-12-23 12:38
配料仅有生牛乳 夏进全脂纯牛奶29.8元15瓶大促2024-12-23 12:17
马雷斯卡:拉维亚可以做得更好,我们对他目前的表现很满意2024-12-23 11:57
邮报:曼联正思考如何让阿马斯更好地发展 有多队想要1月租借球员2024-12-23 11:02
索尔斯克亚观战狼队引猜测,记者:他是去看好友麦肯纳2024-12-23 10:43
好了。又要银河战舰了。尼玛的pcl这种臭水平 居然还有银河战舰这种说法 又开始了 真jb好笑2024-12-23 10:40
[流言板]杰威场均20+5+5,生涯第三年此数据的15名球员13位进全明星2024-12-23 13:04
突发!以色列拉响警报,军方称未能拦截导弹2024-12-23 12:32
AMD新一代Radeon显卡RDNA 4来了!RX 8800 XT公版卡首曝2024-12-23 12:21
账户仅剩70万美元!法拉第前高管创办的造车新势力凉了:裁员、停产、强制休假2024-12-23 11:57
[流言板]一柱擎天!祖巴茨全场13投10中,得到21分15篮板5助攻2抢断2024-12-23 11:41
那些建议4am去搞T1的2024-12-23 11:29
中国大唐集团有限公司原总经理寇伟被查2024-12-23 11:16
合作生存恐怖游戏《CRYO》Steam页面 发行日期待定2024-12-23 11:05
《鞋带物语》Steam页面上线 勇者劝退魔王冒险2024-12-23 10:57
邮报:曼联正思考如何让阿马斯更好地发展 有多队想要1月租借球员2024-12-23 10:40