综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
4月6日,Meta发布最新大模型Llama-4,包含Scout、Maverick和Behemoth三个版本。Llama-4-Maverick在LMArena的排行榜一度排名第二,但随后因疑似刷榜行为遭质疑。4月8日,Chatbot Arena确认Meta提供的是“特供版”,修正后模型排名跌至32位。原排名第二的“Llama-4-Maverick-03-26-Experimental”为实验性聊天优化版本,而修正后的开源版本“Llama-4-Maverick-17B-128E-Instruct”表现不佳。Meta解释称实验版优化对话性,在LM Arena表现较好。尽管LM Arena并非权威指标,但此事件引发对模型评估标准的关注。Meta表示将关注开源版本的实际应用反馈。
原文链接
标题:Llama 4遭遇竞技场争议:特供版刷榜疑云
正文:
Meta旗下的Llama 4因在大模型竞技场Chatbot Arena上的表现引发争议。Arena官方指责Meta提供的版本为特供版,并未如实标注。官方已公开超过2000组对战数据,显示模型回复风格与语气是排名的重要影响因素。
初步分析表...
原文链接
大模型产业陷入刷榜竞赛,导致模型泛化能力下降。去年9月,一篇论文揭露了phi-1、TinyStories等大模型在测试集上预训练刷榜的现象。大模型参数持续增加,成本高昂,但在实际应用中,mini版模型因低时延低成本更受欢迎。亚马逊云科技在re:Invent大会上推出多种大模型版本,强调用户选择的重要性。真正的需求应是看见用户需求,提供多样选择,而非单一追求‘最强’。
原文链接
加载更多
暂无内容