在8月2日，lmsys官方宣布，DeepMind研发的Gemini 1.5 Pro实验版在Chatbot Arena排名中登顶，超越了GPT 4o和Claude-3.5，夺得了第一的位置。这是Gemini 1.5 Pro在综合表现上的卓越表现，不仅在数学、指令遵循、编码等领域取得前三名的好成绩，而且在中文、日语、德语、俄语等多个语言版本上均表现第一。Gemini 1.5 Pro实验版的胜率高达54%对阵GPT-4o，59%对阵Claude-3.5-Sonnet。此消息迅速引起了行业内的广泛关注，包括前OpenAI开发者、现Google AI Studio产品负责人Logan Kilpatrick，DeepMind CEO Demis Hassabis以及Gemini研发者Jeff Dean在内的多位行业人士纷纷转发祝贺。Gemini 1.5 Pro实验版在AI领域的显著进步，引发了行业内对后续正式上线版本的极大期待。