过去几年,人工智能快速进入企业应用场景。从智能问答、内容生成,到知识检索、辅助决策,大模型正在改变企业获取信息和处理工作的方式。
从内容生成到业务执行,AI 正在进入新的发展阶段
随着智能体(Agent)技术的发展,AI 正在发生一个更加重要的变化:它不再只是回答问题,而开始在授权范围内参与企业任务的执行。
一些企业正在探索让智能体连接业务系统、调用工具、访问数据,并参与连续工作流程。变化的关键不只是模型能力增强,更在于 AI 与业务系统、工具和流程的关系正在改变。
销售智能体
分析客户信息、生成方案,并辅助推进业务。
研发智能体
理解需求、操作代码仓库,并参与开发流程。
运维智能体
分析运行状态、调用管理工具,并辅助处理故障。
当 AI 从“信息助手”走向“任务执行参与者”,它的应用边界和潜在价值都在扩展。与此同时,企业也需要回答一个新问题:如何让具备任务执行能力的 AI 保持可靠并可管理?

AI 安全正在从关注内容,延伸到关注行动
在较常见的 AI 应用讨论中,关注点往往集中于模型输出、敏感信息、提示词干扰和结果是否符合预期。
智能体最大的变化,不只是生成内容,而是开始执行行动。一次任务可能经历意图理解、路径选择、工具调用、数据访问、业务状态变化和结果返回。
因此,企业的关注边界正在从模型层延伸到运行过程:既要理解结果,也要理解结果是如何产生的。
当这条运行过程进一步连接真实业务,企业需要理解的问题也会随之增多。
智能体为什么会带来新的安全挑战?
与许多以信息交互为主的 AI 应用相比,智能体的一个显著变化,是能够进一步连接工具和真实业务流程。连接企业环境的智能体一旦执行了不恰当的动作,影响就可能进入真实业务流程。
办公智能体可能访问企业文件,研发智能体可能连接代码仓库,运维智能体可能拥有系统操作能力。这些连接让 AI 从“工具”逐渐成为企业数字环境中的“任务执行参与者”。

企业可以从六个相互关联的维度审视智能体风险
沿着一条典型的智能体运行链路,身份决定智能体代表谁,权限决定它能够做什么,工具把行动带入业务系统,上下文影响判断,执行过程形成结果,而责任边界决定问题能否被复盘和改进。
身份风险:企业是否知道“是谁”在行动?
在传统 IT 环境中,用户通常有清晰的账号、角色和权限。但企业可能同时拥有内部创建、第三方提供、不同团队部署以及彼此协作的多类智能体。
当智能体数量增加,企业首先需要回答:哪些智能体正在运行,它们又代表谁执行任务?如果身份边界不清晰,后续的权限管理和责任追溯都会受到影响。
权限风险:智能体是否拥有超出任务需求的能力?
为了完成任务,智能体通常需要连接企业资源,并根据任务动态调用不同能力。权限不足会限制价值,权限过大又可能带来数据暴露、超出授权范围的操作和业务影响。
如何让智能体获得完成当前任务所需要的能力,同时避免不必要的访问,是企业需要持续回答的问题。
工具调用风险:AI 的行动边界正在扩大
API、数据库、文件系统、自动化平台和业务应用,让智能体能够完成更多工作,也扩大了需要管理的风险边界。
企业的关注焦点可能从模型本身进一步延伸到工具和执行路径。如果调用过程缺乏清晰约束,一个错误判断就可能被放大为真实业务影响。
上下文风险:AI 可能在错误理解下执行预设流程
智能体的判断不仅依赖一句用户指令,也会受到历史上下文、外部数据、工具返回结果和当前任务状态影响。
即使执行流程本身没有偏差,智能体也可能因为理解了错误的信息而完成错误的目标。企业需要关注的不只是“AI 收到了什么”,还包括“AI 为什么这样判断”。
执行风险:企业是否能够看清完整行动过程?
智能体的一次行动,可能连续经历任务理解、工具选择、过程判断、实际执行和结果返回。如果企业只能看到最终结果,就很难快速理解问题发生在哪个环节。
未来需要记录的不只是单个操作,而是能够说明前因后果的完整智能体行动过程。
责任风险:出现偏差时,责任边界如何界定?
当智能体发送了错误信息、访问了不适合的数据,或执行了不符合预期的操作,企业需要知道问题发生在哪里、为什么发生、由谁确认,以及如何避免再次发生。
缺少清晰的过程记录和责任边界,会增加企业扩大智能体应用时的评估与治理难度。

为什么智能体安全值得成为企业 AI 落地的基础能力
随着智能体应用探索增加,企业环境中可能逐步并存多个面向不同业务场景的智能体。相应的管理与风险治理问题,也会逐渐从模型层延伸到创建、接入、运行和执行过程。
随着智能体深入企业流程,问题会从“是否使用 AI”逐渐转向“如何更加稳妥地使用 AI”。就像云计算和移动办公推动了新的管理能力形成,智能体的发展也在推动新的安全领域出现。
智能体安全关注的,不只是模型本身,而是智能体从创建、接入、运行到执行全过程中的安全问题。将这些问题放回企业治理视角,可以归纳出四个值得持续建设的方向:
写在最后
当 AI 开始代表企业行动,安全能力也需要同步演进
企业引入智能体,通常希望改善效率、流程和业务创新,但实际效果取决于具体场景、系统条件和治理方式。智能体安全不是限制 AI 的发展,而是帮助企业更加放心地使用 AI。若要让智能体进入更关键的业务环境,企业还需要建立可靠、可管理、可持续观察和评估的运行基础。
