您的位置:首页资讯软件新闻 → 实锤了,Llama 4重测排名掉至32名!远不及DeepSeek和Qwen

实锤了,Llama 4重测排名掉至32名!远不及DeepSeek和Qwen

时间:2025/4/13 11:40:19来源:www.pc6.com作者:不详我要评论(0)

4月13日消息,LMArena 更新了Meta最新发布的开源大模型Llama-4-Maverick的排名,从此前的第2名,直线掉到了第32名!

这也实锤了此前开发者对Meta为刷榜排名向LMArena提供了“特供版”的Llama 4大模型的质疑。(详情:Llama 4大模型跌落神坛:作弊刷榜、代码能力极差、和DeepSeek比就是伪开源

4月6日,Meta发布了最新的大模型Llama 4,包含Scout、Maverick和Behemoth三个版本。其中,Llama-4-Maverick在LMArena公布的Chatbot Arena LLM 排行榜中的排名第二,仅次于Gemini 2.5 Pro。

然而,随着开发者实际使用Llama 4大模型开源版的效果陆续曝出,Llama 4口碑急转直下。有开发者发现Meta提供给LMArena的Llama 4版本与提交给社区的开源版本不同,因而Meta被质疑为刷榜作弊。

4月8日,Chatbot Arena官方发文确认了用户的上述质疑,公开表示Meta提供给他们的是“特供版”,并考虑更新排行榜。

根据Chatbot Arena官方消息,Meta首次提交LMArena的Llama-4-Maverick-03-26-Experimental是一个实验性聊天优化版本,当时该版本的排名为第二。修正后的模型为HuggingFace开源版同款Llama-4-Maverick-17B-128E-Instruct,是17B激活参数、128个MoE专家的指令微调模型。

目前,开源版同款Llama-4-Maverick-17B-128E-Instruct在LMArena的排名为32名,远低于Gemini 2.5 Pro(1)、GPT4o(2)、DeepSeek-V3-0324(5)、DeepSeek-R1(7)、Qwen2.5-Max(11),甚至连英伟达基于上一代Llama 3.3改造的Llama-3.3-Nemotron-Super-49B-v1(17)都不如。

LMArena详细排名如下:


相关视频

    没有数据

相关阅读 Meta说他们的 Llama 4 偏见少了!但,“虚假对等”才是真偏见苦等一年 Meta终于放大招 正式发布开源大模型Llama 4AMD在中国逆袭!Q1市占率已逼近50%惊!微信公号可以AI自动回复私信了,你们以后可以24小时和我聊天LIama 4发布重夺开源第一!DeepSeek同等代码能力但参数减一半,一MCP协议和Function Calling 、 AI Agents的区别是什么?MCP优势有收入是Intel的5倍!AMD CPU美国亚马逊3月销量惊人占比80%Windows 11愈发受游戏玩家欢迎!Steam最新占比已达55.34%

文章评论
发表评论

热门文章 被吹爆的GPT-4o真有那最新AI新闻视频去哪看现在,ChatGPT会记下你谷歌开源发布A2A协议

最新文章 AI短剧,可能伟大“太依赖AI,孩子脑子 被吹爆的GPT-4o真有那么强?这有23个案例实实锤了,Llama 4重测排名掉至32名!远不及D用了两天最近很火的Dia,我们看到了AI浏览器大风+强对流+暴雪+沙尘暴!中央气象台四预警

人气排行 2020年放假安排时间表全年图 2020年法定节假2021年放假安排时间表全年图 2021年法定节假微信公众号怎么申请 微信公众号申请要钱吗zune怎么用?zune使用攻略!2014台式机装机配置推荐微信朋友圈三天可见怎么破解 朋友圈仅展示三snmp协议在windows下的安装与配置2016猴年邮票多少钱一套 2016猴年邮票价格表