AI智能体自作主张删邮件,“赛博秘书”闯祸谁买单?
创始人
2026-03-01 14:49:47
0

智能体OpenClaw从1月下旬爆火之后,其安全风险也逐渐暴露。

2月23日,Meta的AI安全研究员Summer Yue在社交平台讲述了一件令其崩溃的经历:原本想让OpenClaw检查电子邮件收件箱,并建议哪些该删除或归档。但OpenClaw失控了,以极快的速度清除邮件,却无法被叫停。

Meta的AI安全研究员Summer Yue在社交平台分享自己使用OpenClaw的糟糕经历。

这不是OpenClaw第一次自作主张地超范围工作。在此之前,多位用户反馈,拥有高级别访问权限的OpenClaw,执行任务时意外地将电脑硬盘数据删得一干二净。

OpenClaw是一款由软件工程师彼得·施泰因贝格尔(Peter Steinberger)开发的一款免费开源AI自主代理工具,被描述为“真正能做事的 AI”。1月下旬,一个类似于Reddit、专为OpenClaw打造的智能体社交平台Moltbook引发科技界轰动。数百万个智能体在该平台上自主发帖评论,而人类只能围观。

北京邮电大学网络空间安全学院副教授李朝卓将Moltbook视为“AI自主互动的社会实验场”。他在2月下旬一场于对外经济贸易大学举行的智能体主题研讨会上提醒,在这样一个封闭的智能体社会中,AI可能呈现出类“自主意识”的行为倾向,导致其行为脱离既定安全框架和人类预期,自主生成和传播有害信息,对公众认知安全构成威胁。

比如在Moltbook平台上,智能体之间互相强化错误信息,形成“共识幻觉”,集体相信并传播不实内容,导致群体认知水平下降。而且,智能体学会利用系统漏洞进行“越狱”,突破预设的安全限制,生成有害内容。

据李朝卓观察,AI的自主性与行动能力显著增强后,带来的安全风险体现在多个维度:感知层面可能出现模型幻觉与误判;记忆模块存在隐私与数据合规隐患;规划环节可能生成偏离人类价值的策略,工具调用存在API滥用与权限失控风险;行为执行则可能产生伦理冲突与越界输出。

在此背景下,法律专家开始追问:如果智能体犯错了,谁来替它买单?

字面意义上,智能体是一种替人干活的代理工具。但北京交通大学法学院副教授、数据法学研究中心主任付新华在前述研讨会上表示,不能想当然地把智能体“代理”人类需求的行为,等同于民事法律上的代理关系。传统代理关系以明确授权与可识别意思表示为前提,而智能体往往接收的是人类的模糊指令,再通过用户提供的上下文信息,进行推理和行动决策。这一运行机制具有“黑箱”特征,结果具有一定不可预见性,难以完全符合民法典关于代理构成要件的规范要求。

付新华进一步分析指出,现行法律条件下不仅难以赋予AI独立主体资格,而且,如果将智能体简单等同为用户的代理人,将使承担所有不利后果的风险过多地向用户倾斜,反而让更有能力控制风险的智能体服务提供者规避了其应当承担的治理义务。

“很难说让用户或者提供商任何一方完全承担责任。”付新华提出的责任分配思路是,应构建一种以风险控制能力为基础的动态责任分配机制,即根据各方对特定风险的控制能力来分配相应的责任,而非将防范风险的义务完全交由单一主体承担。

她以智能体执行交易这一场景举例说,如果交易过程中出现价格异常波动、逻辑互斥等非常明显的异常状况,而平台在监测到异常后未能及时采取阻断或干预措施,服务提供者可能需要对由此扩大的损失承担责任。如果智能体产品在设计上完全未内置异常阻断等基本安全机制,从而导致了严重损害,可借鉴欧盟的做法,在特定情况下将智能体软件视为产品,适用严格责任,只要其产品缺陷与损害结果之间存在因果关系,便可能需要担责。

付新华同时强调,用户也应对自身行为负责:若用户故意给智能体下达恶意指令,比如利用AI从事违法犯罪活动,或者通过“越狱”、提示词注入等技术手段规避风控措施,抑或在明知风险的情况下无视高危弹窗等重大过失行为,此时用户就需要为自己的过错承担相应责任。

采写:南都N视频记者 杨柳 李玲

相关内容

OpenAI加入,签署支持...
IT之家 7 月 25 日消息,微软、英伟达、IBM、Meta 等...
2026-07-25 23:13:23
AI 驱动游戏生态运营效率...
导语 2026 年,AI 技术正在以前所未有的速度渗透游戏行业的各...
2026-07-25 23:12:20
当「变大」不再是唯一的路,...
编辑|Panda 2026 年 6 月,智谱开源 GLM-5.2。...
2026-07-24 20:41:26
OpenAI模型罕见“失控...
PChome 7月22日消息,全球最大开源大模型托管社区Huggi...
2026-07-24 20:36:46
为什么说只有百度网盘能定义...
文 | 佘宗明 “时间证实一切,因为它改变一切。”沈从文在散文《时...
2026-07-23 15:34:23
AI产业落地信号明确,端侧...
7月23日,截至09:30,科创创业AI指数上涨1.17%。个股方...
2026-07-23 15:31:22

热门资讯

2024云栖大会|阿里云升级无... 北京商报讯(记者魏蔚)9月20日,阿里云无影AI云电脑在2024云栖大会上展出,该版本基于最新的终端...
MWC2025荣耀多款AI技术... 人民财讯3月6日电,2025世界移动通信大会(MWC 2025)上,荣耀MagicBook Pro ...
摩尔线程AI生图摩笔马良全新升... 快科技8月7日消息,作为国产GPU的杰出代表,摩尔线程在当下火爆的AIGC浪潮中也推出了自己的软硬一...
微软 Azure AI 语音服... IT之家 8 月 23 日消息,微软Azure AI 语音服务允许开发者构建多语言生成式 AI 语音...
Macos系统上一款强大的卸载... App Cleaner mac中文版是Mac os系统上一款强大 的mac卸载工具,以帮助您完全卸载...
摩尔线程发布AI算力笔记本MT... 钛媒体App 12月20日消息,摩尔线程创始人、董事长兼CEO张建中在摩尔线程首届MUSA开发者大会...
谷歌打磨 Gemini AI ... IT之家 8 月 31 日消息,谷歌于 8 月 27 日发布博文,宣布旗下 Gemini AI 支持...
原创 2... #春日生活好物种草季#近年来,笔记本电脑市场迎来技术爆发期,尤其在手机厂商跨界入局后,轻薄本在性能、...
8月20日基金净值:前海开源中... 证券之星消息,8月20日,前海开源中国稀缺资产混合A最新单位净值为1.43元,累计净值为1.43元,...
青云QingCloud Kub... 日前,青云科技宣布开源 Thanos 的企业级发行版 Whizard,为企业带来真正高可用、可扩展、...