1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议
综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
Meta 开源大模型 Llama-4-Maverick 基准测试排名暴跌,此前被质疑刷榜作弊
4月6日,Meta发布最新大模型Llama-4,包含Scout、Maverick和Behemoth三个版本。Llama-4-Maverick在LMArena的排行榜一度排名第二,但随后因疑似刷榜行为遭质疑。4月8日,Chatbot Arena确认Meta提供的是“特供版”,修正后模型排名跌至32位。原排名第二的“Llama-4-Maverick-03-26-Experimental”为实验性聊天优化版本,而修正后的开源版本“Llama-4-Maverick-17B-128E-Instruct”表现不佳。Meta解释称实验版优化对话性,在LM Arena表现较好。尽管LM Arena并非权威指标,但此事件引发对模型评估标准的关注。Meta表示将关注开源版本的实际应用反馈。
镜像现实MirageX
04-14 15:39:17
分享至
打开微信扫一扫
内容投诉
生成图片
Llama 4遭竞技场背刺!实锤用特供版刷榜,2000+对战记录公开
标题:Llama 4遭遇竞技场争议:特供版刷榜疑云 正文: Meta旗下的Llama 4因在大模型竞技场Chatbot Arena上的表现引发争议。Arena官方指责Meta提供的版本为特供版,并未如实标注。官方已公开超过2000组对战数据,显示模型回复风格与语气是排名的重要影响因素。 初步分析表...
Oasis
04-08 14:54:51
分享至
打开微信扫一扫
内容投诉
生成图片
大模型落地,苦「最强」久矣
大模型产业陷入刷榜竞赛,导致模型泛化能力下降。去年9月,一篇论文揭露了phi-1、TinyStories等大模型在测试集上预训练刷榜的现象。大模型参数持续增加,成本高昂,但在实际应用中,mini版模型因低时延低成本更受欢迎。亚马逊云科技在re:Invent大会上推出多种大模型版本,强调用户选择的重要性。真正的需求应是看见用户需求,提供多样选择,而非单一追求‘最强’。
WisdomTrail
12-20 14:32:13
分享至
打开微信扫一扫
内容投诉
生成图片
加载更多
暂无内容
AI热搜
更多
扫一扫体验小程序