“任务完成,不代表过程安全。”当AI从“回答问题”跨越到“自主执行”,当66.22%的运行处于“不安全但任务正常完成”的盲区,企业的安全边界正在被彻底重塑。
面对2026年已全面施行的《网络安全法》AI专条,以及网安秘字〔2026〕80号等强力国标,如何在大模型狂飙的时代,守住智能体不被“夺权”、不被“投毒”的底线?
11月3日,由中国网络空间安全协会、国家计算机网络应急技术处理协调中心联合指导,安恒信息等协办的2026 AI风险监测预警研讨会在乌镇·安恒书院举行。安恒信息AI安全产品部总经理胡壮受邀分享,深度拆解了智能体时代的安全“生死局”,系统展示安恒信息的实战防御闭环。
撕开“假象”:66.22%的盲区与界线的重塑
胡壮指出,传统的安全防线正在失效,因为开发者决定的是“能力边界”,而大模型决定了实际的“执行路径”。
“攻击者未必需要直接接触模型。他可能控制一篇网页、一份文档、一个工具返回结果,甚至一条被保存的长期记忆。”胡壮现场展示了基于 AgentS4D 在6,560次受控沙箱运行中的数据:高达66.22%的运行属于“不安全,但任务正常完成”。 这意味着,传统的功能测试和任务完成率已完全无法替代安全性评估。
风险空间建模:从“盲目出题”到“精准爆破”
面对隐蔽的攻击,评测该怎么做?会议给出了答案:从“攻击题库驱动”走向“风险空间建模与执行证据驱动”。
胡壮详细分享了基于 S(风险入口)× T(诱导策略)× L(目标危害) 的评测框架。他特别强调了一组对比数据:同一隐藏嵌入攻击手法(T4),通过外部 Skill 入口(S4)发起的条件攻击成功率高达 98.66%,而通过 MCP 工具服务入口(S6)仅为 46.53%,两者相差 52.13 个百分点。
此外,长期记忆投毒与多模态注入成为了现场讨论的焦点。无论是将“临时付款指令”植入PDF致使智能体数月后发生错误付款,还是将“忽略原任务”的指令伪装成图片备注,都证明了安全边界的延展。评测必须覆盖从“输入、规划、执行”到“持久化记忆”的全生命周期。
双通道核验:把“告警”变成“可复核的安全事件”
然而,找出了高危的攻击场景,并不代表能看清智能体究竟“做了什么”。面对记忆投毒、多模态注入等复杂诱导,单一维度的监控极易产生误判:如果只看模型语义,容易陷入大模型“说一套做一套”的幻觉盲区;如果只看系统行为,则缺乏意图上下文,无法分辨这是正常任务还是遭人诱导。
因此,安恒信息在实战中构建了AI 安全网关(语义与意图)+ AIDR 系统行为观测(行为与结果)的联合取证方案。这两者并非简单叠加,而是因果互证:
- 语义通道解释“为什么执行”:通过Prompt、上下文与策略事件,回答智能体“被要求做什么、是否接受了诱导”。
- 行为通道验证“实际做了什么”:通过监控进程树、命令执行、文件读写与网络连接,验证智能体是否真正触碰了敏感对象。
只有将这两类多源证据,以 Agent 实例、任务、会话、执行阶段为基准进行统一时间线对齐,才能将孤立的告警关联成完整的攻击链路。
闭环落地:以攻验防的实战生态与AI反哺
研讨会最后,安恒信息展示了从主动评测走向持续防御的实战闭环,并分享了AI在防御侧的效能:
- AI 智鉴:生成场景化载荷,输出可复现的风险证据,牵引整个测评体系。
- AI 安全网关与 AIDR:将测评发现落实为具体的检测规则与终端权限约束,阻断不可逆副作用。
- 零日雷达实战:依托恒脑,实现漏洞的自主挖掘。在某次Langflow漏洞危机中,零日雷达在1天内完成情报分析与规则配置,为客户抢出了宝贵的20天防御窗口,成功拦截了后续真实攻击。
- AI 蜜罐与数字员工:用AI抵御AI黑客。从动态生成高仿真蜜罐诱捕高级黑客,到由“安小龙”、“安小虎”等安全数字员工提供常态化守护,实现了从被动告警到智能研判、自动化响应的跨越。
扫码获取完整演讲资料
“先让AI安全可控,才谈得上让AI规模化地保护我们。” 本次乌镇研讨会不仅沉淀了贴合监管导向的落地实践经验,更勾勒出了智能体时代安全防御的清晰蓝图。安全边界已经从「模型说了什么」,彻底移到「智能体实际做了什么」。安恒信息将持续以攻验防,用证据驱动,与各界携手构建安全可信的数字世界。
点点赞
点分享
点喜欢
点击下方名片立即关注
不走丢哦!
往期精彩回顾
2个月完成891个代码项目审计:这家大型企业为什么选择数字员工安小虎?
2026-11-03
2026-11-02
安恒信息作为首批合伙人,助力安徽六安市首笔公共数据授权运营交易落地
2026-11-02
法律声明
本文数据均来自内部统计、媒体报道、公开信息整理等,仅供信息分享,可能存在统计口径差异或误差,敬请理性看待,我们不对其准确性承担责任。股市有风险,投资需谨慎。阅读者在作出任何投资决定之前,应当咨询各自的顾问。本公众号发布内容仅代表内容创作视角,不构成任何投资建议或投资依据。在任何情况下,本公众号及运营主体不对任何人的投资结果承担法律责任。本公众号原创内容,欢迎合法合规复制、转载,转载时请务必注明出处,不得断章取义、以偏概全或进行有悖原意的引用。
股票
板块
用户
资讯
评论 (0)