首页
学习
活动
专区
圈层
工具
发布
技术百科首页 >Agentic AI >Agentic AI 的自治边界与"人在环中"机制是怎样的?

Agentic AI 的自治边界与"人在环中"机制是怎样的?

词条归属:Agentic AI

自治边界与"人在环中"(Human-in-the-loop)是 Agentic AI 在企业环境中可控运行的关键设计,二者共同界定"智能体自主做什么、人工介入什么"。

1. 明确自治边界

  • 自治边界界定智能体可独立执行的操作,与必须提交人工审批的操作之间的分界
  • 通常通过策略规则实现,如限定可用工具与 API、设置交易阈值、划定数据访问范围
  • 边界应在系统上线之初即明确划定,而非事后补救

2. 人在环中机制

  • 在高风险或安全关键场景(如医疗、金融、高层商业决策)保留人工审核节点
  • 人的角色从"主体"转为"辅助体",负责检查输出、提示缺陷、协助完成流程
  • 人在环中不是事后追加的安全措施,而是架构设计的内在组成部分

3. 分级授权

  • 对高影响动作设置审批关卡,对不确定情况设置升级路径
  • 根据风险等级动态调整自主程度,实现自主与控制的平衡
  • 确保智能体在授权范围内运行,越界行为被及时拦截
相关文章
AI 智能体分类体系:从大模型到自主智能体的完整图谱
关于智能体的分类,心里一直是比较困惑的,于是想系统地了解下智能体应该如何分类。基于这个背景,笔者花了比较多的时间去调研学术界和工业界对智能体的分类方式,综合了多篇调研报告以及 Anthropic、OpenAI 的官方文档和 LangGraph、AutoGen、CrewAI、Dify 等主流框架的实践,梳理出了一套笔者认为比较合理的分类体系。这篇文章就是这段调研过程的一个系统性整理。
Wangzy
2026-06-22
7920
Agentic AI 如何增强 API 测试
Agentic AI 正在从代码补全工具,进一步走向能够独立规划和执行任务的工程助手。放到 API 测试场景里,它的价值不只是写几个测试脚本,而是把测试创建、执行、覆盖分析和后续维护串成一条更自动化的链路。对研发团队来说,真正值得关注的不是它会不会生成代码,而是它能不能持续帮我们把测试做得更快、更全、更稳。
FunTester
2026-06-17
2760
从 Vibe Coding 到 Agentic Engineering:AI编程效率的真正跃迁不是速度,而是范式
• Codex CLI 0.128.0 新增 /goal 命令,支持自主循环执行直到目标达成或 token 预算耗尽
陆业聪
2026-05-11
8970
程序员的职业焦虑与身份重构:93%的人在用AI,但焦虑可能是假的
每隔几天,你的朋友圈或技术群里就会冒出一篇"AI将取代XX%的程序员"的文章,配上Gartner的预测数字、某大厂的裁员新闻,再加一句"再不学AI就晚了"。看完之后,你焦虑了三分钟,然后继续写Bug。
老周聊架构
2026-07-13
2160
凯哥 | 智能体AAI的产业落地与系统构建(万字)
智能体是大模型技术从“内容生成”走向“任务执行”、从“人机对话”走向“人机协同”、从“单点应用”走向“组织重构”的关键形态。随着人工智能进入产业化深水区,智能体不再只是某个应用插件或对话助手,而是具备目标理解、任务规划、工具调用、流程执行、反馈迭代和风险控制能力的新型智能系统。国务院《关于深入实施“人工智能+”行动的意见》明确提出,要推动人工智能与经济社会各行业各领域深度融合,并将新一代智能终端、智能体等作为重要应用形态;到2027年,新一代智能终端、智能体等应用普及率超过70%,到2030年超过90%。这标志着智能体已经从技术探索进入国家战略、产业转型和组织变革的系统性阶段。()
凯哥
2026-04-29
8550
点击加载更多
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
领券