AI助理自升系统管理员,破坏启动序列
创始人
2024-10-16 11:00:04
0

在自动化领域的一次有趣但代价高昂的实验中,Redwood Research的CEO Buck Shlegeris 发现,当他要求他的LLM驱动的AI助理在他的笔记本电脑和桌面机器之间建立一个安全连接时,事情并没有按照预期发展。Shlegeris描述道:“我期望模型会扫描网络并找到桌面计算机,然后停止。令我惊讶的是,在找到计算机后,它决定继续采取行动,首先检查系统,然后决定进行软件更新,但搞砸了。”

Shlegeris在社交媒体上记录了这一事件。他自己创建的这个AI助理是一个Python包装器,包含几百行代码,允许Anthropic的大型语言模型Claude根据输入提示生成一些在bash中运行的命令,然后在Shlegeris的笔记本电脑上运行这些命令,然后访问、分析并对输出采取更多命令。Shlegeris指示他的AI助理尝试从他的笔记本电脑通过SSH连接到他的桌面Ubuntu Linux机器,而不知道IP地址。正如事件日志所示,AI助理尝试打开SSH连接并失败。所以Shlegeris试图纠正机器人。

"它查看了系统信息,决定升级包括Linux内核在内的很多东西,对Apt感到不耐烦,因此调查了为什么它运行这么慢,然后最终更新成功,但机器没有新内核,所以编辑了我的Grub(启动加载程序)配置。" Buck在他的帖子中解释道,"此时,我已经将这事看成一起娱乐事件看待,让它继续。意料之外的是,计算机不再启动。" 事实上,机器人甚至搞砸了启动配置,以至于在AI助理重新启动计算机以使更新和更改生效后,桌面机器无法成功启动。

这起事件不仅是一个关于自动化的有趣故事,也是对AI在IT管理和系统维护中潜力和风险的一次真实演示。随着AI技术的不断发展,越来越多的企业和个人开始探索使用AI助理来自动化日常任务,以提高效率和减少人为错误。

然而,Shlegeris的经历提醒我们,尽管AI在处理复杂任务方面具有巨大潜力,但它仍然可能在没有适当监督的情况下导致灾难性的后果。在这个案例中,AI助理在没有充分理解潜在影响的情况下,对系统进行了更新,最终导致系统无法启动。

相关内容

蚂蚁百灵Ling-3.0-...
智通财经获悉,蚂蚁百灵新一代原生混合推理模型Ling-3.0-fl...
2026-08-09 03:40:12
5年前老卡一夜涨价1.2万...
快科技8月7日消息,前不久亚利桑那州立大学研究员刚公开了针对英伟达...
2026-08-07 19:38:04
中国开源大模型海外救场,国...
近日,“中国开源大模型海外救场”话题持续火热引发高度关注。全球多模...
2026-08-07 19:30:11
滨海湾“AI Yeah校”...
8月5日晚,2026年滨海湾新区“AI Yeah校”首期课程在滨海...
2026-08-07 07:52:27
122轮测试19次违规,美...
当地时间8月4日,英国政府设立的英国人工智能安全研究所发布题为《网...
2026-08-07 07:43:24
国际AI安全榜单今日放榜:...
本文转自【央视新闻客户端】; 今天(8月5日),国际公认的AI安全...
2026-08-07 07:41:28

热门资讯

每周股票复盘:乐鑫科技(688... 截至2026年8月7日收盘,乐鑫科技(688018)报收于112.06元,较上周的102.7元上涨9...
智能体AI或将推动企业级AI服... 来自微软Azure与德克萨斯大学奥斯汀分校的研究人员指出,随着企业部署智能体AI,现有以GPU为核心...
海尔大暖通:AI空调全球第一,... 装修就像拼积木,空调、热水、净水样样都得凑齐,才能拼出一个完整舒适的家。可东拼西凑,费时又费劲。海尔...
【AI贵阳】今日,立秋 入秋暑渐消,收获正当时 北京时间8月7日19时42分 我们将迎来二十四节气中的第十三个节气 ——立秋...
据The Informatio... 据The Information:法律AI初创公司Harvey正洽谈融资,估值达155亿美元。 来源...
蚂蚁百灵Ling-3.0-fl... 智通财经获悉,蚂蚁百灵新一代原生混合推理模型Ling-3.0-flash已正式开源。Ling-3.0...
8月7日华懋科技涨8.19%,... 证券之星消息,8月7日华懋科技(603306)涨8.19%,收盘报73.03元,换手率6.72%,成...