首页 >> 综合 > 快讯 >

Gartner 调研超 75% 组织已在落地 AI 整合,代理式 AI 带来全新治理难题

2026-11-09 22:41:25 来源:网易 编辑:幸宽竹 

根据 Gartner 的调研结果,已经超过 75% 的企业和机构都在试点、部署或者落地 AI 相关能力,不少组织已经用上代理式 AI,也就是 AI 智能体来自动完成多步骤业务任务,但现在大部分企业的 AI 治理体系还是为传统软件、普通生成式 AI 设计的,跟不上代理式 AI 自主执行、自动调用工具、高速运行的特点,治理跟不上落地速度,就容易出现影子 AI 泛滥、权限失控、不可预期操作、合规审计难等问题;代理式 AI 和普通问答 AI 不一样,它可以自主规划流程、调用系统、发起操作,传统的事后审核、静态政策很难管住它,企业做 AI 治理的时候,不能直接套用老一套规则,第一步先盘点内部所有 AI 智能体,区分它们的自主等级和风险等级,第二步给不同风险的代理式 AI 匹配差异化权限、运行时管控,第三步做好行为日志、审计追溯,最后配套专门的应急响应流程,避免代理式 AI 意外操作带来安全、合规、资金损失。

核心概念区分清单

类型能力特点治理方式差异
普通生成式 AI单次问答、产出文本图片,一般不主动操作系统事前审核、内容过滤、人工复核为主
代理式 AI(Agentic AI)自主拆解任务、多步骤执行、调用接口、访问业务系统、自动触发操作运行时动态管控、权限隔离、实时阻断、全链路审计

代理式 AI 最突出的治理挑战

  1. 影子 AI 泛滥:很多业务人员自己搭建、使用未备案的代理式 AI,IT 和安全团队看不见,无法统计风险,属于无监管的 AI 应用
  2. 行为不可预测:大模型具备概率性输出,代理式 AI 可能出现偏离指令、越权访问、误操作,静态制度拦不住运行时的异常行为
  3. 权限风险:代理式 AI 拿到数据、系统权限之后,一旦被提示词注入、劫持,会直接放大数据泄露、篡改业务数据的风险
  4. 审计溯源难:多步骤自动执行,动作链条很长,出现问题很难快速定位是模型、提示词、工具调用哪一环出错
  5. 治理一刀切风险:全部强管控会拖累业务效率,全部放开又会带来高风险,统一治理策略不适合所有智能体
  6. 责任边界模糊:AI 智能体不是责任主体,出了合规事故,很难快速界定业务、IT、安全、供应商各方责任

Gartner 推荐企业落地代理式 AI 治理步骤

  1. 资产盘点:全面梳理组织内所有代理式 AI,登记用途、访问权限、数据范围、开发人员,建立 AI 智能体台账
  2. 分级分类:按照自主程度、数据敏感等级、业务影响,划分高、中、低风险等级,不同等级匹配不同管控强度
  3. 运行时控制:增加实时拦截机制,限制代理式 AI 可调用工具、可访问数据,设置操作额度、审批卡点
  4. 日志与审计:完整记录代理式 AI 每一步规划、工具调用、输入输出,满足监管追溯要求
  5. 权限最小化:默认不给代理式 AI 权限,只分配完成任务必需的最小权限,禁止泛化权限
  6. 应急响应:专门针对代理式 AI 误操作、被劫持场景制定预案,可快速关停、回滚 AI 发起的操作

相关预测数据

  • 到 2027 年,40% 企业会因为治理缺陷,下线或者降级已经部署的自主 AI 智能体
  • 到 2029 年,大量上线代理式 AI 的组织,会因为缺少运行时管控,发生服务中断、安全或者资金类事故
  • 只有少数组织搭建了适配代理式 AI 的成熟治理框架,大部分企业治理能力滞后于 AI 落地节奏

【相关 FAQ】

问题 1:Gartner 提到超 75% 组织已开始整合 AI,代理式 AI 和普通生成式 AI 治理差别在哪?

回答 1:Gartner 提到超 75% 组织已开始整合 AI,普通生成式 AI 大多只做内容生成,治理侧重内容审核;代理式 AI 可以自主执行多步骤任务、调用系统,治理重点是运行时管控、权限隔离、行为审计,静态政策很难管住它的自主动作。

问题 2:Gartner 报告里,代理式 AI 带来治理新挑战,影子 AI 是什么风险?

回答 2:Gartner 报告里,代理式 AI 带来治理新挑战,影子 AI 就是业务人员私自搭建、使用没有报备的代理式 AI,安全和 IT 团队看不到它的存在,不知道它访问哪些数据,属于隐蔽风险,非常容易发生数据泄露。

问题 3:Gartner 说超 75% 组织已整合 AI,企业做代理式 AI 治理能不能统一一套规则?

回答 3:Gartner 说超 75% 组织已整合 AI,不建议所有代理式 AI 使用同一套治理规则,低风险简单智能体管控太严会拖累业务,高风险智能体管控不足会引发事故,要按风险等级差异化治理。

问题 4:Gartner 调研中,代理式 AI 治理最大难点是什么?

回答 4:Gartner 调研中,代理式 AI 治理最大难点是传统治理模式是事后核查,而代理式 AI 可以高速自主执行,一旦出错动作瞬间完成,缺少实时阻断能力,同时 AI 行为存在不确定性,很难提前预判风险。

【参考资料】

[2026-10-02](AI Agent Reality Check,Gartner 代理式 AI 风险分析)Gartner

[2026-09-30](AI Agents Are Outrunning Cybersecurity Oversight)Gartner

[2026-05-26](Gartner:一刀切治理会导致企业 AI 智能体失败)Gartner

[2026-02-28](Gartner 发布 2026 网络安全趋势,代理式 AI 为重点)Gartner 中国

[2025-09-30](Gartner 调研:75% 企业试点部署 AI 智能体)Gartner 新闻稿

【免责声明】

以上内容基于 Gartner 公开调研、行业分析报告整理,仅作为企业 AI 治理、技术规划参考,不构成合规方案、采购方案或者法律意见。不同行业监管要求、数据合规标准不一样,代理式 AI 治理方案需要结合自身业务、监管法规单独设计;Gartner 相关预测属于行业趋势判断,不代表一定会发生,企业落地 AI 项目前建议由安全、法务、IT 团队联合评估风险。

 
最新文章