谷歌新模型Gemini 1.5 Pro在lmsys竞技场首次夺冠，击败了GPT-4o，成为双冠王，总榜评分高达1300以上，并在视觉排行榜上领先。Gemini团队对此表示庆祝，称此模型为他们制作过的最强大、最聪明的版本。Reddit用户对Gemini 1.5 Pro给予正面评价，期待其功能不被削减。然而，Gemini 1.5 Pro在编码和特定挑战上表现不佳，受到部分网友批评。此外，谷歌推出了Gemini 2系列中的20亿参数模型Gemma 2（2B），并在竞技场排行榜上超越了所有GPT-3.5模型，甚至超越了Mixtral-8x7b。专家们对竞技场的排名权威性提出了质疑，强调MMLU等其他评估方式的重要性。Gemini 1.5 Pro的胜利引发讨论，关于匿名投票排名的可靠性，以及是否应停止使用此类排行榜。