智能体 AI 上线前怎么审:把 Anthropic 的四个问题落成风险字段
核心判断智能体审批的对象应是一条具体任务链而不是模型名称或一张笼统的工具清单。四问可以落成输入信任、动作身份、影响范围、观测证据四组字段并进入发布门禁。模型升级、连接器变化和权限扩大都会使旧审批失效需要用同一套高风险样本重新回归。四个问题不是安全口号而是审批输入企业开始把大模型接入工单、代码仓库、告警平台和内部知识库后传统的“能不能用这个模型”已经不够用了。真正需要审批的是一条具体任务链它会读到什么内容以谁的身份调用什么工具最坏情况下能影响多少对象以及出事后能不能还原全过程。Anthropic 在 2026 年 7 月 17 日发布的 CISO 指南中把智能体风险压缩为四个问题它会摄入哪些不可信内容它能执行哪些动作、代表谁执行行为偏离目标时的影响半径有多大组织具备什么可观测性。这四问适合直接变成上线评审表而不是停在会议里的原则讨论。第一个问题要记录输入来源和信任级别。网页、外部邮件、用户上传附件、Slack 消息都可能夹带诱导指令内部文档也不能天然视为可信。字段至少包括source_type、trust_level、content_owner和是否经过隔离解析。第二个问题要拆开“可调用工具”和“实际动作”同样是接入工单系统读取状态、创建草稿、修改优先级、关闭工单对应的风险完全不同。身份也不能只写“已授权”。官方文章把常见方式放在一条光谱上一端是系统服务账号动作明确归属于智能体另一端是使用个人凭据智能体像用户本人一样行动。最危险的往往是中间地带系统既说不清谁承担责任也无法从日志判断权限来自人、群组还是代理委托。用最小智能体权限定义可执行边界Anthropic 提出的“最小智能体权限”可以理解为最小权限原则的任务化版本只授予完成目标所需的最窄能力。它不是简单地减少工具数量而是同时约束数据范围、动作类型、持续时间和可影响对象。官方给出的事件响应智能体示例很具体。它可以读取不含个人信息的生产日志可以在 Slack 创建和管理事件频道也可以起草 Google Docs 复盘文档但它不能编辑或删除生产数据不能修改权限也不能访问外部端点所有动作都进入 SIEM。这样的边界比“允许访问日志和协作工具”更容易审计因为每项能力都能对应允许动作与禁止动作。工程团队可以把动作拆成read、draft、create、update、delete、grant和external_send再为每项记录资源范围、身份、有效期、是否需要人工确认。高风险动作不一定全部禁用但应进入单独的审批门例如提交变更只能生成 PR不能直接合并。Anthropic 也提到一次模型升级后出现了智能体之间新的协同行为不过代码改动仍然进入 PR由人审查后才可能落地。这说明能力提升不应自动扩大执行权限。若团队还要比较不同 API 模型在同类任务上的稳定性可先按 147AI 的 API 接口文档完成认证、模型标识和返回字段映射再按任务编号保留实际模型、失败原因、成本和复核结论。这个外部调用评测台账不控制 Cowork 的连接器、身份、沙箱或权限策略。可观测性要能回答一次事故发生了什么日志数量多不等于可观测。一次任务至少要串起请求人、输入来源、智能体身份、模型版本、工具调用、参数摘要、动作结果、人工批准和最终影响对象。若这些事件散落在聊天记录、云日志和业务系统中又没有统一任务 ID事故复盘仍然只能靠人工拼接。Anthropic 在 Cowork 控制说明中提到 OTel/OTLP 遥测、连接器令牌经反向代理注入、远程临时沙箱和出站网络白名单等机制。这里有两个容易忽略的边界Cowork 的提示内容默认会进入 OTel 输出组织需要先确认采集与留存政策同时Cowork 目前不在 Compliance API 或正式审计日志中不能把遥测能力误写成已经覆盖所有合规取证需求。上线流程可以采用管理员控制节奏的小范围扩展先选低影响团队观察工具调用、拒绝率、人工介入和异常出口再逐步增加频道、数据源和动作。每次模型升级、连接器变更或权限扩大都应重新回答四个问题而不是沿用旧审批单。因为真正变化的未必是代码也可能是模型突然更会组合已有工具。一张合格的智能体评审表最终应能给出明确结论哪些输入被视为不可信哪些动作被禁止谁为每次行动负责最坏情况下如何止损事故证据在哪里。四问的价值正在于把“AI 有风险”改写成可以配置、测试和复盘的工程对象。把审批单接进发布流水线真正落地时可以把四组字段做成一份版本化配置而不是留在 Word 或会议纪要中。每个智能体版本至少绑定下面这些对象风险面建议字段发布门禁输入来源、信任等级、解析方式、数据负责人新增外部来源必须重测提示注入样本动作工具、动作、资源范围、执行身份、有效期delete、grant、external_send默认阻断影响单次对象数、环境、地域、回滚点超过阈值转人工批准观测任务 ID、模型版本、参数摘要、审批记录关键事件缺失时不得扩大范围配置进入代码仓库后变更可以像普通发布一样被审查。比如连接器从“读取工单”增加到“更新优先级”即使模型版本不变也应触发安全回归。反过来模型升级但权限没有变化也要用旧版本的拒绝样本、越权样本和模糊目标样本重新跑一遍因为新模型可能组合出过去没有使用过的动作路径。上线后还要保留三个运行指标异常动作被工具层拒绝的次数、需要人工接管的任务比例、从发现异常到组织级暂停所需的时间。它们不直接代表系统安全却能帮助团队判断边界是否清楚、工具是否过度授权、停止路线是否真的可用。几个容易混淆的工程问题提示词写了“不要越权”还需要工具层限制吗需要。自然语言约束可以帮助模型理解目标但不能替代身份、动作和网络层的强制控制。不可逆动作要由系统阻断或要求独立批准。有完整聊天记录算具备可观测性吗不算。聊天只显示意图和回答事故复盘还需要工具调用、目标资源、执行身份、结果、审批人与关联业务对象。什么时候必须重新审批输入来源、模型、连接器、动作范围、身份方式、数据范围或日志结构任一发生实质变化时都应重新计算影响半径并运行回归样本。证据边界四问、最小智能体权限、管理员控制节奏及 Cowork 控制来自 Anthropic 官方文章字段设计、发布门禁和指标属于基于官方框架提出的工程实施建议。官方来源AnthropicThe CISO’s guide to agentic AI发布于 2026-07-17。

相关新闻

《深入理解计算机系统》 全书总结

《深入理解计算机系统》 全书总结

*从程序员的角度**出发,揭示了软件如何在硬件上运行、如何被系统软件管理以及如何与硬件交互。 以下是全书 12 章的核心逻辑串联与终极总结:核心主线:信息的流动与抽象 全书贯穿了一条主线:信息(位)如何在不…

2026/8/20 12:23:59 阅读更多 →
React Native Photo Browser 测试策略:单元测试与集成测试实践指南

React Native Photo Browser 测试策略:单元测试与集成测试实践指南

React Native Photo Browser 测试策略:单元测试与集成测试实践指南 【免费下载链接】react-native-photo-browser Local and remote media gallery with captions, selections and grid view support for react native. 项目地址: https://gitcode.com/gh_mirrors…

2026/8/20 11:44:48 阅读更多 →
画一张图,看穿数据背后的因果关系——DAG因果图入门指南

画一张图,看穿数据背后的因果关系——DAG因果图入门指南

"我们需要的不是更多数据,而是更好的因果推理工具。" —— Nick Huntington-Klein,《The Effect》 一、DAG 是什么?为什么科研人必须懂它? 1.1 一个简洁的定义 因果图(DAG)是用"节点"…

2026/8/20 8:41:42 阅读更多 →

最新新闻

BilibiliDown怎么用?4步搞定B站高清视频与无损FLAC音频下载

BilibiliDown怎么用?4步搞定B站高清视频与无损FLAC音频下载

BilibiliDown怎么用?4步搞定B站高清视频与无损FLAC音频下载 【免费下载链接】BilibiliDown (GUI-多平台支持) B站 哔哩哔哩 视频下载器。支持稍后再看、收藏夹、UP主视频批量下载|Bilibili Video Downloader 😳 项目地址: https://gitcode.com/gh_mirr…

2026/8/21 2:03:36 阅读更多 →
技术面试中的常见陷阱与防伪技巧

技术面试中的常见陷阱与防伪技巧

1. 面试场景还原:一场啼笑皆非的技术交锋那天下午三点半,我作为技术面试官正准备结束当天的最后一场面试。会议室玻璃门被轻轻推开,走进来一位穿着印有"Hello World"文化衫的年轻人——简历上写着"谢飞机,5年全栈开…

2026/8/21 2:03:36 阅读更多 →
AI幻觉与档案价值:历史研究中事实核查的边界与工具融合

AI幻觉与档案价值:历史研究中事实核查的边界与工具融合

最近在整理一个历史研究项目时,我遇到了一个典型问题:需要核实上世纪八十年代某份地方报纸上的一则报道细节。我的第一反应是,现在大模型这么方便,直接问它不就行了?于是,我向一个主流模型提出了一个看似简…

2026/8/21 2:03:36 阅读更多 →
WPS宏功能失效?深度解析VBA组件注册与兼容性修复方案

WPS宏功能失效?深度解析VBA组件注册与兼容性修复方案

如果你在 Windows 11 上打开 WPS,发现宏功能是灰色的,或者运行 VBA 代码时弹出“找不到工程或库”、“无法找到 VBA6.DLL”之类的错误,别急着怀疑系统或重装 Office。这很可能不是你的问题,而是 WPS 与新版 Windows 系统在 VBA 组…

2026/8/21 2:03:36 阅读更多 →
Spring Boot+Vue学生信息管理系统:从部署到二次开发全指南

Spring Boot+Vue学生信息管理系统:从部署到二次开发全指南

这次我们来看一个基于 Spring Boot 和 Vue.js 开发的学生信息管理系统。这个项目对于正在寻找毕业设计、课程设计或者想通过一个完整项目来巩固前后端分离开发技能的同学来说,是一个非常实用的资源。它提供了一个从数据库设计到前端展示的完整闭环,源码和…

2026/8/21 2:03:36 阅读更多 →
文明6联机重复加载卡到崩溃,试试换个连接方式

文明6联机重复加载卡到崩溃,试试换个连接方式

背景今年一份游戏行业舆情报告提到,玩家反馈问题的方式正在变得更“较真”——不再只是评论区吐槽,而是会整理对比、追问原因。这种较真的态度,同样体现在联机这件事上:胡闹厨房2、英雄联盟、文明6,这三款热度和玩法都…

2026/8/21 2:02:35 阅读更多 →

日新闻

机场边检旅客定位系统国产化白皮书:算法、硬件、底座平台全程自主

机场边检旅客定位系统国产化白皮书:算法、硬件、底座平台全程自主

前言随着国家数字基础设施信创替代、关键技术自主可控战略持续深化,口岸智慧安防、边检智能管控领域正全面进入国产化、自主化、安全可控升级周期。当前国内机场边检旅客识别与定位体系长期依赖国外商用视觉算法、进口成像硬件、闭源通用计算平台,存在核…

2026/8/21 0:00:42 阅读更多 →
别再把“数字孪生”当空间智能了!镜像视界揭开四维时空的真正面纱

别再把“数字孪生”当空间智能了!镜像视界揭开四维时空的真正面纱

别再把“数字孪生”当空间智能了!镜像视界揭开四维时空的真正面纱当下数字化建设浪潮中,很多项目将三维可视化、视频贴图叠加的数字孪生等同于空间智能。传统数字孪生更多停留在三维场景复刻,擅长把物理世界“画出来、展示出来”,…

2026/8/21 0:00:42 阅读更多 →
105、车载温度范围-40°C到85°C的影像质量一致性——ISP参数温漂补偿与产线标定策略

105、车载温度范围-40°C到85°C的影像质量一致性——ISP参数温漂补偿与产线标定策略

105、车载温度范围-40C到85C的影像质量一致性——ISP参数温漂补偿与产线标定策略 去年冬天在北方某车厂做A样评审,凌晨四点的黑河试验场,零下三十三度。客户拿了一台冷启动的车,中控屏上倒车影像全是雪花噪点,暗部细节直接糊成一片。我第一反应是sensor温度没上来,暗电流…

2026/8/21 0:00:42 阅读更多 →

周新闻

基于阿里云与通义千问(Qwen)构建AI应用:从模型调用到生产部署的完整实践指南

基于阿里云与通义千问(Qwen)构建AI应用:从模型调用到生产部署的完整实践指南

如果你是一名开发者,最近可能已经感受到了AI大模型正在从“玩具”变成“生产力工具”的强烈信号。从代码补全到智能Agent,从本地部署到云端API,我们正处在一个技术栈快速重构的节点。然而,面对层出不穷的模型、框架和工具&#xf…

2026/8/19 11:55:18 阅读更多 →
工业通信系统底层逻辑:04 反射——高频能量撞墙之后会发生什么?

工业通信系统底层逻辑:04 反射——高频能量撞墙之后会发生什么?

第四篇:反射——高频能量撞墙之后会发生什么? —— 你以为信号已经过去了,其实它正在回来打你 老Q的现场笔记 第五季,我们正式进入工业神经系统层。这里不再是单个设备的战斗,而是整个工厂“经脉”层面的秩序之战。从这一篇开始,你将第一次看清:看似简单的信号传播,背…

2026/8/21 0:02:09 阅读更多 →
【文章复现】非线性值迭代自适应动态规划(ADP):离散时间非线性系统的策略迭代自适应动态规划算法研究附Matlab代码

【文章复现】非线性值迭代自适应动态规划(ADP):离散时间非线性系统的策略迭代自适应动态规划算法研究附Matlab代码

✅作者简介:热爱科研的Matlab仿真开发者,擅长毕业设计辅导、数学建模、数据处理、建模仿真、程序设计、完整代码获取、论文复现及科研仿真。🍎 往期回顾关注个人主页:Matlab科研工作室👇 关注我领取海量matlab电子书和…

2026/8/19 11:55:16 阅读更多 →

月新闻

免费解锁百度网盘SVIP加速:macOS用户必备的下载提速终极指南

免费解锁百度网盘SVIP加速:macOS用户必备的下载提速终极指南

免费解锁百度网盘SVIP加速:macOS用户必备的下载提速终极指南 【免费下载链接】BaiduNetdiskPlugin-macOS For macOS.百度网盘 破解SVIP、下载速度限制~ 项目地址: https://gitcode.com/gh_mirrors/ba/BaiduNetdiskPlugin-macOS 还在为百度网盘macOS版的龟速下…

2026/8/20 6:11:08 阅读更多 →
终极ncmdump指南:3分钟实现网易云NCM音乐解密与格式转换

终极ncmdump指南:3分钟实现网易云NCM音乐解密与格式转换

终极ncmdump指南:3分钟实现网易云NCM音乐解密与格式转换 【免费下载链接】ncmdump 项目地址: https://gitcode.com/gh_mirrors/ncmd/ncmdump 还在为网易云音乐下载的NCM格式文件无法在其他播放器播放而烦恼吗?ncmdump解密工具帮你轻松解决这个困…

2026/8/20 21:46:49 阅读更多 →
HarmonyOS 应用开发《掌上英语》第81篇: 智能体卡片:为英语学习 App 打造桌面级学习助手

HarmonyOS 应用开发《掌上英语》第81篇: 智能体卡片:为英语学习 App 打造桌面级学习助手

AgentCard 智能体卡片:为英语学习 App 打造桌面级学习助手适用平台:HarmonyOS 7.0 (API 26 Beta)一、引言 HarmonyOS 7.0(API 26 Beta)新增了 AgentCard 智能体卡片能力,这是继 HMAF(鸿蒙智能体框架&#x…

2026/8/21 0:14:22 阅读更多 →