吴云坤:以全生命周期安全体系守护 AI 创新底线
创始人
2025-11-08 22:16:22
0次

11月8日,2025年世界互联网大会乌镇峰会人工智能技术创新与治理论坛在浙江乌镇举行。来自阿里巴巴、奇安信、SAP、快手、腾讯、思科的企业代表出席,围绕人工智能技术创新与治理分享实践经验、共话行业未来。

奇安信集团总裁吴云坤在《守住安全底线 保障AI创新发展》的主题分享中表示,安全是AI的底线和红线,也是AI发展的基础和前提,AI创新必须管住“框、数、人、链”四个关键环节,核心方法是系统性、体系化地构建AI全生命周期的安全体系。

以奇安信自身为例,设计了AI安全治理框架,指导用户围绕“安全、合规、可控、负责任”四大目标,从模型安全治理、数据和隐私、应用和运营、基础安全、人员与责任、持续改进六个维度,构建覆盖AI全生命周期的安全防护体系,同时重点管好“框、数、人、链”四个关键环节。

首先对AI应用进行场景化防护,管好“框”和“人”。围绕AI应用及其场景部署大模型卫士,构建“管控-检测-溯源”三位一体的防护体系,实现对大模型系统内外部用户访问与交互的全流程管控,达成“管得住、看得清、防得稳”的防护目标。

目前,大模型卫士已经在政府机构、大型央企等近百家客户完成了验证,能有效防御提示词注入、敏感内容过滤、模型对抗攻击、模型窃取、数据泄露等多种安全风险。

其次是对AI核心数据资产重点防护,管好“数”。围绕保护核心数据资产,构建“大模型安全护栏”,从“强基础、控权限、审数据、拦攻击”等多个维度构建纵深防御与监测能力,对大模型系统进行防护,控制数据安全风险。

奇安信已投入了巨大的资源和成本训练安全模型,积累关键和核心数据资产,通过构建“大模型安全护栏”,对SFT数据、标注数据、RAG数据、模型文件、评估集等核心数据资产进行强化防护,守护住了模型训练成果。

最后是强化AI全生命周期的安全评估,管好“链”。秉持“安全左移”理念,将安全评估与风险管控贯穿大模型研发、部署、运维全生命周期。在开发阶段,通过代码审计、代码修复确保模型安全;上在线前,通过实战攻防演练检验应用安全;在运行中,持续监测模型的输出异常、数据泄露风险确保业务安全。

今年3月,奇安信支撑某电信运营商进行了大模型底座的安全评估,成功发现并修复了其大模型存在的多个系统漏洞和内容防护机制缺陷,将隐患扼杀于萌芽状态。

据悉,本次论坛由中央网信办网络管理技术局发起,中国科学院、中关村实验室主办,中国科学院计算技术研究所、中国网络空间安全协会、百度公司协办。

佳佳 晓风

校对 朱亚萍

相关内容

热门资讯

国产大模型下调推理服务价格,南... 近日,国内某大模型企业宣布下调其flash系列模型服务价格,输入缓存命中、输入缓存未命中及输出价格最...
解码青年人AI生活《2026有... 中新网深圳9月5日电(记者索有为)《2026有意思生活方式报告》(下称《报告》)4日在全国首个有意思...
OpenAI 最强 AI 生图... 9月9日消息,OpenAI 9 月 9 日官宣发布 ChatGPT Images 2.5,图像生成延...
探索AI供应链产业化路径京东推... 2026年以来,人工智能应用范围加速拓展,持续从数字空间走向现实生活,广泛融入生产线、仓储厂房、配送...
教育部发文!AI生成内容,教师... 一篇论文,因为AI使用不当,相关高校师生被通报处理。 9月2日,安徽财经大学公布“教师与学生涉嫌学术...
AI识别出近800种可充当乳化... 英国利兹大学食品科学与营养学院和爱丁堡大学科学家携手,开发出一款 人工智能(AI)工具,能从数千万种...
搭上低空经济、AI文旅?两连板... 桂林旅游(000978)回应市场热点。 9月8日,桂林旅游再度涨停,斩获2连板。当天晚间,该公司披露...
硅谷:我们不能被硅谷“AI刹车... 【文/底线思维】 OpenAI首席科学家Jakub Pachocki最近写了一篇文章,题目叫《An ...