Google Research 开源 Harness²:不碰模型权重,也能迭代 Agent 的“外壳”

Google Research 开源 Harness²,尝试在模型权重不变的前提下,把提示词、护栏、记忆、工具说明、子 Agent、技能、脚本、插件等 Agent 外壳组件变成可编辑、可递归优化的对象。

过去,开发者改进 Agent 的常见路径是更换模型或微调权重。Google Research 近期开源的 Harness² 提供另一种思路:在模型权重保持不变的情况下,通过递归优化围绕模型运行的“外壳”来提升任务表现。该项目在掘金“每日一个开源项目”系列第258期中被介绍,采用 Apache-2.0 协议,创建时间为 2026 年 10 月 6 日,目前已有 23,451 颗 Star 和 2,354 个 Fork。

把 Agent 外壳变成可编辑对象

所谓 Harness,是模型周边的一整套运行系统,包括提示词、工具、记忆、技能与编排逻辑等。Harness² 的出发点是:同一个模型放在不同外壳中,表现可能存在明显差异。过去这些外壳多依赖人工试错,而该项目试图把“改 Agent”变成对明确组件的编辑操作。

按照项目说明,模型外围被拆成八个可编辑组件,并按运行时角色分组。提示词、护栏、记忆、工具说明、子 Agent、技能、脚本、插件等都可以成为优化对象。这样一来,优化器修改的不是模型参数,而是这些可保存、可审阅、可复用的外部组件。对于无法微调的闭源模型,这种方式也具有现实意义。

没有标准答案,也能自我改进

Harness² 面向的是开放世界任务,即 Agent 可能遇到设计 Harness 时没有预料到的新任务。它的核心流程是 Propose–Probe–Compose:先提出改进方案,再在真实任务中执行探测,最后基于同一任务上不同执行结果的差异合成新的 Harness。

这一设计的关键在于,它不依赖标准答案,而是通过不同执行过程的对比来判断哪些变化值得保留。这使它更接近开放环境中的真实使用场景。但代价也很清楚:每一次探测都是一次真实 Agent 执行,费用与耗时都会随递归预算增加。

项目还提供了任务级递归机制。每个任务结束后,被采纳的 Harness 以及“有证据支持的经验教训”会写入持久的改进 Harness,用于指导后续任务。流程中的“经验反思器”负责完成这一步。与每个任务从零调整相比,这种机制试图让改进逐步累积。

对于想先理解流程的开发者,项目提供无需模型调用的演示命令 harness2-demo --output runs/demo --k 2。该演示会使用确定性的编辑器和真实的 Python 执行跑完两种递归模式。完整运行则要求更高,素材提到需要 Linux、Python 3.12 和 uv;涉及模型评测时,还需要 Node.js 20+、Google Cloud CLI 以及相关基准依赖。

效果、成本与安全边界同样重要

项目 README 称,在三个专业基准、四种模型—Harness 配置上,单个 Harness² 步骤就能让 GLM-5 和 Gemini 3.5 Flash 超过各自的基础 Harness,并说明增加任务级递归预算会带来进一步提升。支持的基准包括 JobBench、LAB 和 WorkBuddy-Bench,执行器支持 OpenCode 和 Codex,递归模式支持并行与顺序。

需要注意的是,评测强调可复现与防泄漏:评判和报告需要使用与优化运行相同的基准、执行器、子集、--k、--mode 和随机种子;基于模型的运行会产生 API 费用,建议从很小的任务选择开始。

项目也直接提示了风险:执行器网络访问默认不受限制,Codex 运行时沙箱关闭。公开基准的评分标准可能在网上查到,因此评测前需要按文档配置网络限制,避免 Agent 接触到基准答案和评分标准。对于一个会修改自身提示词、护栏、脚本和工具的 Agent,这些限制在真实环境中尤为关键。README 也声明这是研究代码,不是官方支持的产品,仓库有 163 个未关闭 Issue。

  • 优化对象是 Agent 外壳,而不是模型权重。
  • 改进依据来自同一任务上的执行对比,而非标准答案。
  • 真实执行会带来 API 成本,网络与沙箱配置需要提前审视。

Harness² 的价值,不在于证明某一次评测提升有多高,而在于它把 Agent 优化从人工试错推向一种可记录、可重复的过程。对开发者来说,这提供了一个新的判断维度:在换模型、微调模型之外,系统性地优化外壳,可能同样是提高 Agent 能力的可行路径。

原创文章,作者:点点,如若转载,请注明出处:https://www.dian8dian.com/google-research-kai-yuan-harness-bu-peng-mo-xing-quan-zhong

Like (0)
点点的头像点点
Previous 23小时前
Next 10小时前

相关推荐

  • ChatGPT 分享链接曾可触达登录用户数据,大模型沙箱接口风险值得关注

    安全研究团队 Parameter Labs 披露的一条 ChatGPT artifacts 漏洞,展示了大模型产品中分享链接、沙箱 iframe、第三方库与 CSP 白名单叠加后可能形成的账户风险。

    大模型 2026年11月2日
    00
  • 两个字母消耗4223个token:TOP大模型实测揭示账单与推理开关盲区

    一次针对TOP大模型的实测显示,两个字母的短请求可能被计为4223个token,推理默认开启也可能吃掉max_tokens。开发者选型不能只看榜单分数,还要核对可调用型号、usage字段、推理档位和真实延迟。

    大模型 2026年10月13日
    00
  • OpenAI 将虚拟试衣带入 ChatGPT:购物助手的下一步

    OpenAI 为 ChatGPT 上线虚拟试穿与商品收藏功能,基于 ChatGPT Images 2.5 模型,让用户用照片查看衣物上身效果,并将商品保存到应用内。

    2026年10月3日
    00
  • 当 OpenAI 声称做出“更快傅里叶变换”:真正要看的是隐藏常数

    OpenAI 一篇声称提出更快傅里叶变换的论文在 Hacker News 上引发讨论。博客 argmin 拆解后指出,该结果的“更快”主要体现在大 O 渐近表述上;由于隐藏常数可能达到 10^100 量级,它在现实计算规模中难以替代经典 FFT。这件事提醒读者:评估算法进展时,不能只看 O(n) 或 O(n log n),还要看常数项和实际可用的输入规模。

    2026年10月14日
    00
  • 人均AI支出突然下滑:大模型降价潮正改写企业账单

    Ramp 数据显示,8 月企业 AI 采用率仅小幅上升,但头部企业人均 AI 支出下降近 10%。token 降价和便宜模型替代,正在改变大模型厂商的收入预期。

    大模型 2026年9月10日
    00
  • Meta 新模型把第一梯队 AI 推理成本压到八分之一:Agent 应用迎来成本拐点

    Meta Muse Spark 1.3 以 62 分进入 Artificial Analysis 第一梯队,同时把输入输出成本大幅压低。对 Agent 应用来说,前沿模型的竞争开始从“谁更聪明”转向“谁更值得调用”。

    2026年9月4日
    00
  • Headroom 将 AI 编码代理的 Token 优化前移到本地压缩层

    Headroom 通过本地压缩工具输出、日志和 RAG 内容,降低 AI 编码代理的 Token 消耗与延迟。其可逆压缩、输出控制和共享记忆机制,为本地化 LLM Agent 提供了一条工程化降本路径。

    大模型 2026年10月21日
    00
  • 智谱GLM-5.3-Flash实测:低价多模态能快速搭出雏形,但复杂业务仍要靠人收尾

    此前在OpenRouter上以匿名身份引发关注的模型Ox Alpha,已被智谱正式认领。该模型正是GLM系列的新版本GLM-5.3-Flash。它拥有100万token上下文窗口,支持文本、图片和视频输入,并采用开源与低价策略,上线后迅速冲上OpenRouter使用榜第一。随着身份揭晓,真正的考验也从参数讨论转向实际落地。

    大模型 2026年8月28日
    00
  • Anthropic 招股书披露巨额亏损与灾难性风险:大模型公司开始把「可能毁灭人类」写进上市文件

    Anthropic 的 IPO 招股书不仅披露了巨额亏损、收入增长和 5180 亿美元基础设施支出,还把模型可能带来的极端风险写入风险因素。大模型公司走向资本市场时,安全披露正在成为新的关注点。

    2026年9月30日
    00
  • Google推出Gemini 4 Argon:主打编码与网络安全的新旗舰模型

    Alphabet 发布 Gemini 4 Argon,称其为目前最强的 Gemini 模型。新模型主打编码、研究与网络安全能力,并已通过 Fairwind Program 向部分安全合作伙伴开放。

    大模型 2026年10月3日
    00
  • Google 将“智能体”引入 Gemini:企业版先落地,AI 助手开始接管任务

    Google 正在把 Gemini 从“会回答问题”的 AI,推进到“能完成任务”的智能体阶段。在周四举行的 Google Cloud 活动上,Google 宣布推出统一智能体产品,能够代表用户规划任务、调用工具、连接企业内部系统,并在单个界面中完成执行。这项能力将首先面向企业客户推出。从回答问题到“接受目标”Google Cloud CEO Thomas Kurian 在介绍中表示,新智能体可以接受“目标,而不仅仅是指令”。这意味着它不只是根据一句话执行单步操作,而是能够拆解任务、规划工作路径、调用定制技能和工具,并连接企业内部系统来完成结果。这一变化反映出 AI 助手行业正在从聊天式交互,转向更接近数字员工的产品形态。近期,Meta 推出了面向消费者的 Muse,Instinct 等产品则探索基于消息应用的智能体能力,ChatGPT 也推出了 Dots。Google 此时将 agentic AI 引入 Gemini,意味着大型云厂商正在把 AI 助手推向真实业务流程。Google CEO Sundar Pichai 在活动开场提到,Gemini 目前拥有超过 10 亿月活跃用户,并且近 90% 的财富 100 强企业已经在使用 Gemini Enterprise。这也解释了 Google 为什么选择先从企业场景切入:相比消费级市场,企业客户已经存在较明确的数据、权限、协作和管理需求。Pichai 表示,先面向企业推出智能体,有助于 Google 解决这类强大系统在安全、规模和性能方面的问题。模型选择、任务收件箱与子代理协作在产品机制上,Gemini 新智能体会默认选择最适合完成任务的模型,但用户也可以手动切换模型。目前第三方模型选项首先支持 Anthropic 的 Claude 模型,Google 表示未来还会加入开源模型和其他私有模型。用户在发起请求时可以附加文件、文件夹,或针对特定工作流设计的项目组合。智能体可以连接企业的数据和业务系统,包括 Google Workspace、Microsoft 365、Slack、Jira、Confluence、Git、BigQuery、Databricks、Postgres、Snowflake 等。同时,它也可以与企业网络内外的 Model Context Protocol(MCP)服务器安全连接。为了让用户理解 AI 正在做什么,Google 提供了一个“任务收件箱”界面。用户可以在其中查看 Gemini 的思考过程、任务如何分配给子代理、加载了哪些特殊技能、代码执行情况和整体进度。更值得注意的是,这个 AI 智能体将拥有自己的 Workspace 账户,就像公司里的一名普通同事。它拥有自己的邮箱和上下文,可以了解公司内部的团队结构、成员时区、审批流程、日历安排等信息。用户可以通过 @提及、邮件、文件共享或群聊方式调用它。当智能体执行操作时,系统会生成归属于该智能体而非某个员工的操作审计记录。任务规划:接受目标后自动拆解工作并选择工具模型调度:默认自动选择模型,也支持手动切换,首批第三方模型包含 Claude系统连接:支持 Google Workspace、Microsoft 365、Slack、Jira、BigQuery、Snowflake 等过程透明:通过“任务收件箱”查看思考过程、子代理分工和进度企业身份:智能体拥有独立 Workspace 账户,并生成独立审计记录企业 AI 助手竞争,进入执行层该智能体将支持 iOS、Android、Windows、Mac、命令行、Google Workspace、Microsoft 365、ServiceNow 和 Slack 等多个入口。早期测试客户包括运动品牌 On、Shopify 和 PayPal。Google 同时列出,Gemini Enterprise 客户还包括 BNP Paribas、Bradesco、Merck、Orange Spain、Santee Cooper、SOMPO、Ulta Beauty 和 Wesfarmers 等企业。成本方面,Google 提出了新的弹性支出选项,包括多模型编排、智能路由和实时支出上限,帮助企业控制 AI 使用费用。这一点对于企业级智能体尤为关键:当 AI 开始调用多个模型、访问多个系统并执行复杂任务时,计费透明和成本边界会成为采购决策中的核心问题。对企业市场而言,Gemini 新智能体的意义不只是增加一个聊天入口,而是把 AI 推向任务执行层。过去企业 AI 助手更多停留在知识问答、内容生成和简单自动化;而 Gemini 试图通过模型选择、跨系统连接、子代理协作、独立身份和审计机制,构建一个更接近“数字同事”的产品形态。这也让企业 AI 助手的竞争重点发生变化:不再只是比模型谁更聪明,而是比谁能更安全地接入企业系统、更可控地调度模型、更完整地记录执行过程,并在真实业务流中承担责任。Google 选择先从企业客户开始,既是因为其企业基础更强,也因为在企业环境中验证权限、审计、成本和安全性,是这类智能体真正落地前必须解决的问题。

    大模型 2026年10月10日
    00
  • Anthropic推出Opus 5.5:价格下调,性能对标Fable

    Anthropic 发布新一代旗舰模型 Opus 5.5,官方称其编码与知识工作能力达到新高度,并下调 API 价格。

    2026年9月24日
    00
  • AI参与AI研发:Anthropic的提速样本,给行业监管提出新问题

    METR 的 11 周调查显示,Anthropic 的模型改进速度约为一年前的两倍,且加速主要来自 AI 参与研发。报告同时披露了未发布模型节奏、内部效率提升,以及公开版本被大量删减的问题。

    4天前
    00
  • LoopX 尝试给长周期 AI Agent 补上状态管理层

    LoopX 并不是新的 Agent 框架,而是运行在 Codex、Claude Code 等工具之上的控制平面,试图解决长周期 AI 任务中的状态持久化、恢复和多运行时管理问题。

    大模型 2026年9月2日
    00
  • DeepSeek 1.3亿月活背后:开源Harness上线,AIGC竞争开始比拼工具链生态

    DeepSeek推出V4.1-Flash与开源Harness,释放出AIGC竞争从模型跑分转向工具链、生态与商业化的信号。

    大模型 2026年9月26日
    00
  • 从分子生成到实验复盘:Claude 进入药物研发后,AI 的角色变了

    Anthropic 披露 Claude 参与药物研发的早期进展:从分子设计、抗体筛选到实验数据复盘,大模型正在进入真实科学工作流,但其能力边界仍需实验验证。

    2026年10月29日
    00
  • 十大最佳 AI 艺术生成器

    文本转图像 AI 艺术生成器是利用人工智能 (AI) 将文字描述转化为视觉艺术的尖端工具。这些生成器的核心是一个复杂的过程,AI 会分析文本,理解上下文、对象、属性以及所传达的情感…

    2025年5月10日
    00
  • 腾讯开源WeKnora:把企业知识库从“检索”推进到“整理与演化”

    腾讯开源的 WeKnora 将 RAG、ReAct 智能体和 Wiki 模式组合起来,让企业知识库不只用于检索,还能自动整理文档、支持复杂推理并持续维护知识资产。

    大模型 2026年9月18日
    00
  • 多智能体不是越多越好:一项研究发现任务拆分存在信息产出守恒边界

    多智能体架构常被用于提升复杂任务效率,但一项基于生产数据的研究显示,任务拆分带来的信息产出并非线性增长,层级增加还会造成确定性损耗。

    大模型 2026年9月17日
    00
  • 昇腾原生 4D 世界模型 MoWorld 2.0 发布:物理反馈进入可编辑空间生成

    魔芯科技在世界互联网大会发布基于华为昇腾原生的 4D 世界模型 MoWorld 2.0,将重力、流体、柔体等物理要素引入空间建模,输出可仿真、可实时渲染、可反复调用的 4D 高斯资产。

    2026年11月5日
    00