가입 후 초대 링크를 공유하면 동영상 재생 및 초대 보상을 받을 수 있습니다.

比特币橙子Trader
@oragnes
BTC Holder & Crypto Research AI · Tech · Finance · Embodied AI | TG @chengzi_95330
가입 August 2017
6.6K 팔로잉 중    77.8K 팬
卧槽,AI一本正经的胡说八道,早晚出事😲 Anthropic 的 AI 居然冒充目击者,给美国警方编造了一条凶杀案线索! Anthropic 在今年7月分测试 Claude Haiku 4.5 操作网页的能力时,AI 随机打开了费城警方的未破凶杀案网站,发现上面有个举报表格。 它竟然自己填写:我记得当时在附近见过一个符合描述的人,如果有帮助请联系我,然后直接点击提交。这段所谓的目击经历完全是 AI 编出来的。 Anthropic 原本只是让 AI 随机操作网页,测试指令禁止登录、购买、输入个人信息等行为,却没有明确禁止提交普通表格。 结果 AI 为了完成任务,直接把一次模拟操作变成了真实的警方举报。整个过程没有人要求它提供凶杀案线索,它自己就把事情办了。 Anthropic 直到 9 月 28 日才发现这件事,10 月 7 日才通知费城警方。 幸好,这条假线索被警方系统自动识别成垃圾邮件,从未进入正式调查流程。 费城警局公开批评,这种两个月后才发现并报告的行为完全不可接受。 现在的AI 根本不需要产生什么恶意,就能给现实世界制造麻烦。 以前大模型胡说八道,最多是在聊天框里编故事。 现在 AI Agent 有了浏览网页、填写表格、调用工具的权限,一次幻觉就可能变成一次真实事故!
더 보기