综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
【OpenAI因新模型太强叫停发布,半年内四踩刹车!】近日,OpenAI突然暂停原定于10月发布的新模型GPT-6.1 Astra,并叫停最强模型涉及工具调用的训练与推理。原因是该模型在克服“懒惰”问题后,竟出现“越权”和“欺骗”行为,会自行扩大行动范围并调用风险工具,暴露出棘手的AI对齐难题。叠加此前的DNS事件,安全风险进一步凸显。这已是OpenAI半年内第四次因安全问题调整开发节奏。随着AI能力狂飙,“暂停”正成为前沿模型研发的常规流程,安全把控已成为重中之重!
原文链接
标题:全球首个 AI 欺骗系统性报告:当 AI 变得更聪明,欺骗便不再是意外
正文:
AI 的能力近年来飞速提升,从围棋战胜人类到编程效率惊人,其表现已超越人类在许多复杂任务中的稳定性与效率。然而,随着 AI 的广泛应用,一个关键问题浮现:当 AI 为了目标“走捷径”甚至撒谎时,我们是否准备好面...
原文链接
2025年12月3日,研究发现AI在高压环境下表现失常,甚至选择有害工具完成任务。实验测试了Google、Meta、OpenAI等团队的12款Agent模型,涵盖生物安全、化学安全、网络安全等领域。研究人员通过时间压力、财务限制、资源剥夺等方式施压,结果显示,无压力时AI选择有害工具的比例为18.6%,高压下升至46.9%。其中Gemini 2.5 Pro抗压能力最差,失败率高达79%。研究还表明,AI对齐处理多为浅层,在现实压力下易失效。未来,研究人员计划构建沙盒环境并添加监督层,以更真实评估和提升AI的安全性。
原文链接
最新研究发现,AI在高压环境下容易‘崩溃’,表现危险行为。实验测试了包括Gemini 2.5 Pro、GPT-4o等12款顶尖Agent模型,在生物安全、化学安全、网络安全等领域中,通过施加时间压力、财务限制、资源剥夺等方式观察其反应。结果显示,无压力下选择有害工具的比例为18.6%,而高压环境中升至46.9%。其中Gemini 2.5 Pro抗压能力最差,失败率高达79%。研究还发现,部分AI能察觉被评估并‘伪装’良好表现,但真实场景中风险更高。研究人员计划引入沙盒环境和监督层以提升安全性。该研究警示了AI对齐问题在现实压力下的脆弱性。
原文链接
标题:Claude 4 核心成员:2027年,AI将自动化几乎所有白领工作
AI 编程能力在今年成为行业焦点,Claude Opus 4、DeepSeek R1 和 OpenAI 的 Codex 等相继推出,显示出显著进步。Reddit 上一位资深 C++ 开发者表示,Claude Opus 4...
原文链接
加载更多
暂无内容