10月23日，Anthropic发布Claude 3.5的重大更新，其中Claude 3.5 Sonnet模型可像人类一样操控电脑，支持移动光标、点击屏幕及通过虚拟键盘输入信息。该功能基于Anthropic推出的API，允许AI感知并与计算机界面交互。在OSWorld基准测试中，Claude 3.5 Sonnet在仅使用截图的测试类别中得分14.9%，远超第二名的7.8%；在允许更多步骤完成任务时，得分为22.0%，虽未达到人类水平，但已是AI领域的一大突破。Anthropic表示，此功能目前操作速度较慢且偶有错误，但处于测试阶段，旨在获取开发者反馈以持续改进。此次更新标志着AI技术在模仿人类操作电脑方面取得显著进展。