Harness 综述:CMU / 耶鲁 / 亚马逊联合发布 + ETCLOVG 七层架构

335 字

Harness 综述:CMU / 耶鲁 / 亚马逊联合发布 + ETCLOVG 七层架构

来源类型: 学术综述
日期: 2026-06-17
标签: #HarnessEngineering #CMU #耶鲁 #亚马逊 #ETCLOVG #七层架构 #AIGC开放社区

核心论点

"把同一个大模型塞进不同的智能体框架系统,表现完全判若两模。"

"决定一个智能体到底能不能在真实世界打工的,其实早就不是模型本身,而是包在模型外面的那层壳。"

"模型只是引擎,外面那圈防护栏、仪表盘、记忆库和工具箱,才是决定智能体能跑多远的核心硬约束。"

三阶段演变

阶段 时间 焦点
第一阶段 2022-2024 提示词工程(拼指令、给示例、优化单次调用)
第二阶段 2025 上下文工程(决定模型每一步看什么、记忆检索、信息压缩)
第三阶段 2026 Harness 工程(包裹模型的执行外壳,维护状态、调度工具、注入反馈、安全规则)

性能瓶颈不在模型

约束绑定假说

"业内曾有一种天真的预期,只要模型越来越强,智能体自然就会越来越可靠。现实并非如此。"

"研究团队提出了约束绑定假说,认为在多步骤、工具密集的长任务中,系统表现不再主要由模型本身决定,而是由模型外部的 Harness 决定。"

关键数据

"在编码基准测试中,研究人员仅修改编辑工具格式和周边 Harness,不改模型,多个模型的表现提升了高达 10 倍。"

"固定 GPT-5.2-Codex 模型,仅通过系统提示词重构、中间件上下文注入和自验证拦截,在 Terminal-Bench 2.0 测试中的成绩从 52.8% 直接拉升到 66.5%。"

"Meta-Harness 通过自动优化 Harness,在没有修改模型权重的情况下,成绩达到了 76.4%,超越了手工调试方案。"

核心判断

"模型只是推理引擎,Harness 才是行为系统。"

"智能体能不能完成任务,取决于它能不能在安全环境里运行,看的信息是否过载,工具好不好用,状态能不能延续,错误能不能回滚。"

ETCLOVG 七层架构

"为了把复杂系统拆解清楚,研究团队提出了 ETCLOVG 七层架构。"

"前四层是结构核心,让智能体跑起来;后三层是控制平面,让智能体可控、可查、可验证。"

七层详解

第一层:执行环境与沙箱(E - Execution)

"智能体需要一个物理环境来执行动作,比如写文件、跑代码、点网页。"

第二层:工具(T - Tools)

  • 工具集成
  • API 调用
  • 工具选择策略

第三层:上下文(C - Context)

  • 信息检索
  • 记忆管理
  • 上下文窗口优化

第四层:生命周期(L - Lifecycle)

  • 状态管理
  • 会话持久化
  • 多轮交互

第五层:可观测性(O - Observability)

  • 日志
  • 监控
  • 调试

第六层:验证评估(V - Validation)

  • 自动化测试
  • 质量保证
  • 性能评估

第七层:治理安全(G - Governance)

  • 权限控制
  • 合规审计
  • 安全规则

170+ 项目分析

"研究团队为了梳理七层架构,从开源社区、论文、公司技术博客中收集和分析 170 多个代表性项目的严谨过程。"

与已有知识的关联

资料来源

  • 原文:https://mp.weixin.qq.com/s/wMPWRBZd-NeRiGSvGIy-0g
  • 原始文件:raw/articles/微信文章2/Harness才是未来:CMU、耶鲁等发布重磅Harness综述.md
  • 来源:AIGC 开放社区

我的判断(高置信度)

这是 2026 年 Harness Engineering 领域最权威的学术综述——CMU / 耶鲁 / 亚马逊联合发布。

关键洞察
1. "约束绑定假说" —— Harness 决定 Agent 表现
2. "10 倍提升不改模型" —— Harness 是核心
3. "三阶段演变" —— Prompt → Context → Harness
4. "ETCLOVG 七层架构" —— 系统化框架
5. "170+ 项目分析" —— 实证基础
6. "Harness 是行为系统" —— 重新定义

预测
- 2026 H2:Harness Engineering 可能成为 AI 工程核心
- 2027:可能形成"Harness 工程师"职业
- 2028:Harness 框架可能标准化
- 对 AI 开发者的建议
- 学习 ETCLOVG 七层架构
- 从 Prompt 转向 Harness
- 重视工具 / 上下文 / 生命周期
- 对企业 AI 团队的建议
建立 Harness 工程能力——而非只关注模型
- 关注可观测性 + 治理安全
- Meta-Harness 自动优化值得关注
- 对学术界的启示
Harness Engineering 是新研究领域
- 可能形成"Harness Science"
- 对投资者的建议
Harness 框架公司是新机会
- 关注 AIGC 开放社区