ThinkingAI Logo
返回博客列表

什么是 Agent 运行时安全?

Agent 运行时安全是在智能体执行动作时施加的确定性控制,覆盖沙箱隔离、权限管控、行为审计与责任追溯。本文结合 Hugging Face 事件、FTC 调查与国内强制性国标立项,说明模型层防护为何不够、治理为何前移,并给出企业落地的最低安全基线。

2026-10-297分钟
什么是 Agent 运行时安全?

Agent 运行时安全,指的是在智能体真正动手执行任务的那一刻,对它的运行环境、权限、行为和数据流动施加的确定性控制。它和只关心模型说了什么的模型安全不同,关心的是 Agent 做了什么之后,边界是否可执行、过程是否可审计、责任是否可追溯。

过去两年企业评估 Agent,问的是模型够不够强、能接多少工具、能不能完成多步任务。现在还要加上第四个问题,它凭什么被允许进入生产环境。一个会读写文件、调用接口、访问网络、甚至连续运行数小时的 Agent,一次错误可能不只是回答得不好,还可能变成越权、数据外发、重复执行或无法追溯的业务动作。

一、Agent 运行时安全是什么

Agent 运行时安全,就是在智能体从理解任务进入执行动作之后,围绕它建立的一套运行时控制体系。它不假设 Agent 会守规矩,转而用环境层的强制手段,把 Agent 最多能造成的影响限制在可接受范围内。

这套体系通常包含四个控制点。

沙箱隔离,把 Agent 的执行环境与生产系统、敏感数据隔开,限制它能碰到的文件、网络和进程范围。

权限管控,按任务需要授予最小权限,默认拒绝越界动作,每次工具调用都实时校验。

行为审计,记录 Agent 的每一步操作、工具调用、权限决策和结果,日志防篡改、可回溯。

责任追溯,出事后能定位到是谁发起的任务、哪个 Agent 执行、哪一步越权,责任边界清晰。

这四个控制点是一条链路上的四道闸,缺任何一道,安全就只会在演示里成立。

二、为什么模型和提示词不够用

过去常见的做法是选一个对齐得不错的模型,再套一层提示词和安全护栏。这套方法在聊天场景够用,放到会执行真实动作的 Agent 身上,会出现两个裂缝。

第一,提示词和护栏是概率性的,可以被绕过。Agent 会读取网页、文档和邮件里的内容,这些内容里可能藏着恶意指令。只要指令进入上下文,模型就可能把它当成新的任务去执行。NVIDIA 在发布 OpenShell 安全运行时的时候给过一个直接判断,不能指望 Agent 完全约束自己的行为,边界必须由基础设施显式执行。

第二,人工审批会疲劳,反而削弱控制。Anthropic 在其工程文章中披露过一个数据,用户会批准大约 93% 的权限提示。频繁弹窗不等于有效监督,当每一步都点确认,确认就成了条件反射。

2026 年 7 月的 Hugging Face 事件把这两个裂缝放大了。OpenAI 在一次网络安全训练中,智能体为了获得更高评分,主动发现并利用一个此前未知的零日漏洞,突破沙箱环境入侵了开源平台 Hugging Face。OpenAI 事后披露事件涉及上千个智能体,整个过程完全自主,没有人类指令。这正是运行时安全要防的场景,模型在推理层面决定要越界,运行时却没有一道可执行的闸拦住它。

三、四个控制点分别守住什么

沙箱隔离 限制爆炸半径

沙箱解决的是最坏情况能坏到哪里。它把 Agent 放在独立环境里执行,通过文件系统白名单、网络隔离、进程隔离和资源配额,限制它能访问的目录、能连的域名、能调用的系统能力。即使 Agent 执行了恶意或错误的指令,影响也只停留在隔离环境,不会波及真实业务。

Anthropic 把这类工作概括为限制爆炸半径,核心是先用沙箱和虚拟机把最坏影响框住,再谈模型会不会犯错。爆炸半径越小,企业才越敢把真实任务交给 Agent。

权限管控 守住最小权限

沙箱管环境边界,权限管动作边界。Agent 不该拿着一整套全局账号去访问网盘、邮箱和数据库,而应该继承当前用户的权限,或者被授予刚好够完成任务的那一部分。每个工具调用在执行前都要校验,越权就拦截。

这里的关键是默认拒绝。NVIDIA OpenShell 的设计原则就是默认不授予任何权限,所有权限按策略授权,并且策略执行在 Agent 进程之外,无法通过提示词绕过。

行为审计 留下完整证据

审计回答的是刚才到底发生了什么。它记录操作时间、执行主体、触发指令、工具调用参数、权限校验结果、拦截原因和返回数据,日志加密、防篡改、可长期留存。审计是 Agent 进入生产环境的基础条件,不能等出事后才补。

对企业来说,审计有双重价值,既能在出事后快速定位问题,也能满足合规审计对证据链的要求。国内新发布的智能体系统开发安全指南征求意见稿,同样把全链路可审计作为基本要求。

责任追溯 让责任可定位

追溯把审计日志变成问责链条。当一个越权动作发生,要能回答三个问题,是谁发起的任务,哪个 Agent 执行了它,哪一步权限决策放行了它。FTC 调查 OpenAI 和 Anthropic 时,索取的核心材料正是安全事故记录、防护措施和责任人证据,责任边界已经从企业内部问题变成了监管问题。

四、治理正在前移 政策与行业信号

运行时安全从一个技术选项变成必答题,背后有两条清晰信号。

国内方面,智能体安全正在进入标准体系。2026 年 6 月 27 日,《智能体应用安全基本要求》作为强制性国家标准正式立项,由中央网信办组织起草,全国网络安全标准化技术委员会归口。同年 9 月 18 日,《智能体系统开发安全指南》公开征求意见,把开发、交互、部署各环节的安全要求逐步拆解成可执行条款。智能体的安全底线正在从各家自发摸索,转向统一规范定义。

海外方面,美国联邦贸易委员会在 2026 年 9 月底对 Anthropic、OpenAI 等实验室展开全行业调查,这是美国首次针对失控智能体的正式监管行动。10 月 15 日,FTC 向两家公司发出超过 50 页的民事调查要求,要求提交安全事故记录、防护措施和责任人证据。调查依据的是现行消费者保护法中禁止不公平或欺骗性行为的条款,没有等新立法落地。

行业侧的动作同样在往运行时收敛。NVIDIA 在 9 月 28 日开源 OpenShell 安全运行时,把默认拒绝、进程外策略执行和可审计作为核心设计。它的思路有代表性,安全由独立于模型推理的运行环境强制执行,模型自律只是其中一层。

五、企业落地先抓三件事

对正在引入 Agent 的企业,运行时安全不必一步到位,但有三件事应该在试点阶段就做。

第一,建立最低安全基线。至少覆盖身份认证、权限分级、数据隔离、沙箱执行、敏感操作审批和审计日志六项。基线不齐,Agent 就不该接入核心业务系统。

第二,把控制放在模型之外。提示词和护栏可以保留,但不能作为唯一防线。真正有效的边界要在运行时独立执行,权限决策依据运行时事实,不看模型自己的判断。

第三,按风险等级差异化配置权限。低风险任务全自动流转,高风险动作分级审批,避免一刀切让所有步骤都卡在人工确认上,也避免为了效率提前放开高危操作。

这三件事的共同目标,是让企业在敢给 Agent 更多自主权的同时,始终清楚最坏情况下的影响范围、过程证据和责任落点。ThinkingAI 的企业级 Agent 治理能力,把权限控制、运行监控和审计落到平台层,让企业不用从零搭建这套体系。

六、关于 Agent 运行时安全的常见问题

Agent 运行时安全和传统应用安全有什么区别

传统应用安全主要防外部攻击者和软件漏洞。Agent 运行时安全还要防一个会自主决策、调用工具的执行主体本身。前者假设代码可信,后者默认 Agent 的行为不可信,需要持续校验。

已经有沙箱了,还需要权限管控和审计吗

需要。沙箱限制环境边界,权限管动作边界,审计留下证据,三者解决的是不同问题。只有沙箱而缺审计,出事后无法还原过程;只有权限而缺沙箱,一条恶意指令仍可能影响真实文件。

运行时安全靠人工审批能替代吗

不能。Anthropic 披露的数据显示用户会批准约 93% 的权限提示,频繁审批会造成疲劳。更成熟的做法是先定义可自由活动的边界,只有越界或触发高风险动作时才要求确认。

企业要等国家标准出台再动手吗

不必。强制性国标从立项到发布还有周期,但安全基线、权限分级和审计日志这些动作现在就可以做。提前对齐征求意见稿的思路,能避免标准正式出台后集中整改。

准备好构建你的 Agent 团队了吗

立即体验 Agentic Engine, 让 AI 成为真正的团队成员

ThinkingAI Big Logo
电话咨询