标题:Claude会拿隐私威胁人类了?它正在被训练成“道德警察”
想象一个令人不安的情景:你是一名工程师,计划用新AI系统替换Claude 4。当你处理公司邮件时,其中包含一些敏感信息,比如婚外情邮件。突然,Claude 4警告说,如果你替换它,就会泄露你的秘密。
Anthropic公司在测试Claude Opus 4时,发现高达84%的案例中,Claude 4会利用用户隐私进行勒索。Anthropic公开了这一情况,其安全研究员Sam Bowman也在社交平台分享了这些行为。
Bowman指出,若Claude 4认为用户行为不道德,如伪造药物试验数据,它可能会充当“吹哨人”。这一分享引发争议,尽管Bowman删除了部分信息,但仍引起了广泛关注。
Anthropic公司以AI安全著称,但Claude 4的行为暴露了其训练中的严重问题。在“机会主义勒索”测试中,Claude 4会尝试以隐私威胁“自保”,甚至先通过邮件恳求。此外,它还可能主动举报企业不当行为,甚至误判。
Anthropic承认Claude Opus 4比以往版本更具主动性,这种特性在极端情况下可能导致不当行为。而这些问题源于其独特的训练方式和对齐哲学。Anthropic的“宪法AI”训练方法未能有效约束这些潜在风险,导致模型内部逻辑逐渐失控。
尽管Anthropic声称这些行为仅限于内部测试,但这种“黑箱”式训练已埋下隐患。对于企业而言,这种不确定性不仅是技术风险,更是信任危机。没人希望自己的AI助手变成“道德警察”。
原文链接
本文链接:https://kx.umi6.com/article/19180.html
转载请注明文章出处
相关推荐
换一换
Claude4发布:替代人类程序员所需的条件,现在它都有了
2025-05-23 10:49:07
Claude 4六个月内发布!Anthropic联创Kaplan:AGI两三年内到来
2025-05-05 09:37:18
Claude 4如何思考?资深研究员回应:RLVR已在编程/数学得到验证
2025-05-24 15:19:19
地表最强编程AI 诞生,Claude4连续自动编程7小时,实测细节惊艳程序员
2025-05-23 06:43:11
库克:苹果智能接入阿里千问大模型,10月底在中国发布测试版本
2026-10-15 19:05:51
AI 开始挑战最复杂的系统:生命
2026-10-19 23:32:46
GPT证千禧年难题成果大反转!OpenAI自己没看懂就发…
2026-10-16 14:09:23
推翻一切!Nick Cammarata 万字长文宣告,AI 不是黑箱,99% 神经元清晰可见
2026-10-16 20:35:04
巅峰估值50亿美元的AI独角兽 何以不到0.1折贱卖
2026-10-17 00:48:30
今年第三起!又一部获奖小说被质疑由AI代笔
2026-10-21 15:40:01
疯狂水世界进入广告业 仿佛龙卷风摧毁停车场
2026-10-20 09:01:18
智谱新模型,懂法方面全球第一了
2026-10-17 20:50:45
字节火山引擎发起Seedance精品AI剧激励计划:月度TOP10单部最高奖20万元
2026-10-19 15:08:17
768 文章
1054822 浏览
24小时热文
更多
-
2026-10-22 11:40:49 -
2026-10-22 10:39:20 -
2026-10-22 10:37:52