一个新 Issue 变成下一版 Skill:Warp 的双层架构构建“自进化”Agent 机制

简介: 让反馈沉淀为下一版 Skill

正文:

一版 Prompt 即使能把任务做对 80%,剩下的问题仍可能让 Agent 变得很难用。Warp 的内部代码审查 Agent 就遇到了这个问题。手动修改 Prompt 和 AGENTS.md 虽然能够改善输出,却难以持续,更深层的问题在于,工程师已经明确指出 Agent 哪里做错了,但这些反馈会随着 Session 结束而失去作用。Warp 因此设计了一套基于 Skill 的改进闭环,并将其称为“自改进 Agent”。需要明确下,这里的改进对象是 Skill 文件,人类反馈经过分析后被转化为 Skill 修改,再经过审核进入后续任务,不涉及模型训练或参数更新。

一次反馈如何进入下一次 Agent 执行

代码审查、Issue 分流这类 Agent,本身并不缺少反馈入口。工程师可以直接回复 Agent 的审查评论,维护者可以在 Issue 中指出标签分错了,用户也可以告诉 Agent 哪项建议不符合团队约定。

现实困难在于“Agent 收到了反馈”和“以后会按照这条反馈工作”之间,还需要一个经验沉淀机制。如 Agent 在代码审查中建议修改某个变量名,工程师告诉它,这类全局变量在当前代码库中采用另一套命名约定。如果这条领域知识只存在于当前 Session,下一次审查仍然可能遇到同样的问题。

因此 Warp 把人类反馈纳入 Agent 的长期改进流程。反馈可以只是简单的点赞,但团队更看重具体解释,包括哪里有问题、为什么有问题,以及团队实际采用什么规则。这类反馈能够为后续 Skill 修改提供更明确的依据。

双层 Skill 拆开任务执行与规则改进

Warp 的核心架构很简单,由两个 Skill 和中间的人类反馈组成。

第一层是基础 Skill。它保存某类 Agent 完成任务需要的领域知识和执行指导。代码审查 Agent 在 PR 创建后,会结合基础 Skill 和当前代码上下文完成审查;Issue 分流 Agent 的基础 Skill 则会保存不同标签的含义,以及判断 Issue 前应该怎样查看代码库。

第二层是改进 Skill。它不处理具体 PR 或 Issue,而是作为观察者分析此前任务产生的人类反馈。两层 Skill 运行在不同节奏上。基础 Skill 随任务触发,改进 Skill 按计划定期运行,读取一段时间内积累的反馈,对比 Agent 原先的建议与人类后续反应,再提出范围尽量小、目标明确的基础 Skill 修改。

两条执行链因此具有不同的运行频率。

任务执行

PR / Issue
    ↓
基础 Skill + 当前上下文
    ↓
Agent 执行
    ↓
输出结果
    ↓
工程师原位反馈


异步改进

一段时间内积累的反馈
    ↓
改进 Skill 定期运行
    ↓
比较 Agent 输出与人类反馈
    ↓
提出基础 Skill 修改
    ↓
PR / 人工审核
    ↓
后续任务使用新版 Skill

这种拆分避免了每收到一条反馈就立即改变正在使用的规则。基础 Skill 维护当前任务应该遵循的工作方法,改进 Skill 专门负责整理经验和提出更新。

Warp 还指出,改进 Skill 本身具有一定复用性。不同 Agent 使用的领域知识各不相同,但读取反馈、比较差异并提出小范围修改的基本过程存在较多共性。因此,相比每个 Agent 都重新设计完整改进机制,这一层具有更大的复用空间。

Skill 文件让改进重新进入 Git 工作流

双层架构解决了谁执行、谁负责改进的问题,Skill 的文件形态则进一步解决了更新如何管理的问题。Warp 将 Skill 设计成基于文件保存的知识和工作指导。Agent 可以在执行任务时按需读取这些内容,不需要把全部知识直接写入原始 Prompt。

文件化带来的直接结果是,改进 Skill 提出的变化能够成为普通的文件修改。整个更新过程也就可以继续沿用开发团队熟悉的 Git 工作流。

人类反馈
   ↓
Skill 修改
   ↓
PR
   ↓
代码审查
   ↓
批准并合并
   ↓
下一次 Agent 使用新版 Skill

这些更新可以经过审查、批准和合并。修改完成合并以后,下一次基础 Skill 执行才会继承这次变化。从工程角度看,人类对 Agent 的反馈最终被转换成了一次可查看、可审核、可合并的 Skill 文件变更。哪些反馈触发了修改、文件具体发生了什么变化、什么时候正式生效,都可以继续沿用 Git 和 PR 已有的版本管理与审核机制。

Warp 已经把这种模式用于其开源仓库中的规格编写、代码审查和 Issue 分流 Agent,并为不同 Agent 建立各自的改进循环。

不过,这里还需要区分 Skill 与 Agent 记忆。Skill 更接近稳定的程序性知识,描述某类任务应该怎样完成,与单次运行无关,并通过显式流程修改;记忆则由 Agent 在推理过程中自动写入,并持续变化。因此,这套架构并不是把每一条用户反馈直接写进 Agent 的记忆,而是筛选值得长期保留的经验,再将其固化到 Skill 中。

一个 Issue 如何变成下一版 Skill

Warp 用一个真实的 Issue 分流 Agent 展示了整条链路。当 GitHub 仓库中出现新 Issue 后,GitHub Action 会启动 Agent。它会分析问题的复杂度和可行性、添加相应标签,并建议后续处理方向。负责这一任务的基础 Skill 保存了不同标签的含义,以及 Agent 在做判断前应该怎样研究代码库。

一次运行中,Agent 基本完成了任务,但漏掉了 ready to spec 标签。这个标签表示 Issue 已经描述了一个实际问题,可以开始进入产品和技术规格设计阶段。

Warp 的维护者发现遗漏后,直接在 Issue 中留下反馈,并解释自己期待什么,以及为什么应该这样判断。反馈没有进入额外的评估系统,而是直接留在工程师原本处理 Issue 的地方。随后,运行在 Warp 内部 Agent 编排平台 Oz 上的改进 Agent 按计划启动。它调用 Skill 中预置的 Python 脚本,从 GitHub 拉取近期带有反馈的 Issue,将信息整理成 JSON,再读入上下文进行分析。

有个细节很重要:数据获取这类相对确定的操作由 Skill 中已经准备好的脚本完成,Agent 主要处理反馈理解和 Skill 修改。尽管没有把这一点单独总结成架构原则,但从实现方式来看,这种分工减少了 Agent 每次执行时临时生成数据获取逻辑的需要。

拿到维护者的反馈以后,改进 Agent 提出了一个尽可能小的基础 Skill 修改。当 Issue 已经描述了一个实际问题,即使具体 UI 或 UX 形式还没有完全确定,也应该添加 ready to spec 标签。接着,它创建了修改基础 Skill 的 PR,并说明哪些反馈触发了此次变化,以及具体修改了什么。最后仍然由人完成审查、批准和合并。完成这一步以后,下一次 Issue 分流 Agent 才会继承更新后的领域知识。

一条普通的维护者评论就这样经历了完整的转换过程:反馈 → Skill 修改 → PR → 人工审核 → 后续复用。一次 Session 中的纠偏,由此变成了后续 Agent 可以继续遵循的工作方法。

“自改进”仍然需要反馈质量、验证与人工控制

这套闭环能够持续运行,不代表所有反馈都应该直接进入 Skill。

首先要控制反馈质量。Warp 建议 Skill 编写原则并解释原因,而不是不断枚举越来越细的规则。相应地,人类反馈也越具体越好。单纯点赞或点踩只能说明结果是否被接受,却无法告诉改进 Agent 哪里错了、为什么错。一小批来自资深工程师的详细领域反馈,有时比大量缺乏解释的二值信号更有价值。

Skill 本身也需要保持精简。Warp 建议采用渐进式披露,让 Skill 引用资源文件和脚本,需要时再加载相关信息,而不是把所有领域材料一次性写进上下文。

关键问题 Warp 团队的自改进 Skill 实践建议
是否混淆了 Skill 与记忆? Skill 更偏程序性、稳定的知识,描述“某件事应该怎么做”,与单次运行无关,并通过显式流程有意修改。记忆则由 Agent 在推理过程中自动写入,并持续变化。
应该共用一个改进循环,还是每个 Agent 各自一套? 可以取中间方案。用一套模板化的基础改进循环承载不同 Agent 之间的共性,再叠加领域特定的配置。Agent 数量较少时可以分别维护;规模扩大后,更适合共享基础循环。
如果人类反馈本身是错的怎么办? 默认错误反馈一定会出现。 不要让 Agent 无条件接受反馈。应提供足够上下文进行合理性检查,筛选哪些人的反馈有效,并在反馈筛选或最终审核阶段保留人工参与。
任务所在领域可以客观验证吗? 如果可以,优先搭建验证框架,再让 Agent 根据验证结果迭代。可以建立参考数据集,将 Agent 输出与参考结果比较,根据差异修改,再重复验证。
如果任务无法完全客观验证呢? 有标准参考输出的部分,优先使用确定性评测。必须依赖人工反馈时,应尽量限定为领域专家反馈,不要无差别扩大反馈来源。
如何判断整个系统是否真的在变好? 跟踪团队本来就在关注的全局指标,例如合并耗时、贡献者数量和成本,并将这些指标反馈给改进 Agent。部署时采用循序渐进的方式,从小范围验证逐步扩大。

人工审核则为真正发生的更新保留了最后一道控制。Issue 分流案例中,改进 Agent 可以提出修改并创建 PR,但基础 Skill 只有在人完成审核和合并以后才真正改变。

对于能够客观验证结果的任务,Warp 还建议优先建立验证框架,让 Agent 输出可以与参考结果比较,再依据验证结果继续改进。无法完全自动验证的领域,可以尽量使用确定性评测和参考结果;必须依赖人工判断的部分,则更适合使用真正了解领域规则的专家反馈。

因此,Warp 的“自改进”并不是一条“收到反馈后自动修改 Agent”的简单循环,而是一套包含反馈筛选、Skill 更新和人工审核的受控改进流程。对于结果可以客观验证的任务,还可以进一步加入自动验证机制。整套模式最终可以压缩成四个环节:反馈 → Skill 更新 → 审核 → 后续复用。

Warp 解决的是一个非常具体的工程问题。原本只在一次 Session 中有效的人类纠偏,如何持续转化为可版本化、可审核,并能够进入后续任务的 Agent 工作方法。

标签: #Warp #Agent #Skill #Claude #Agent工程 #代码审查 #GitHub #开发者工具 #自改进Agent #AI工程

相关文章
|
3月前
|
自然语言处理 API
SkillOpt 让你的 Skill 实现自进化
SkillOpt是微软开源的文本空间优化器,专为优化Agent的自然语言技能文档(如Markdown格式的skill.md)而设计。它不修改模型参数,而是通过“执行-反思-更新-验证”闭环,自动迭代出更鲁棒的`best_skill.md`,让技能持续适配真实任务,提升Agent在复杂流程、多源判断、跨项目迁移等场景中的稳定性与准确性。
409 0
SkillOpt 让你的 Skill 实现自进化
|
4天前
|
人工智能 安全 API
阿里云Token Plan 个人版Quick Start:最低39 元/月,主流AI工具直接接入,Credits 统一计量
阿里云百炼 Token Plan 个人版是面向个人开发者的 AI 大模型订阅服务,采用 Credits 统一计量,支持在 Claude Code、Cursor、Qwen Code 等主流 AI 编程和智能体工具中使用。目前提供 Lite、Standard、Pro 三档套餐及用量包,限时价格分别为 39 元/月、139 元/月、499 元/月。
阿里云Token Plan 个人版Quick Start:最低39 元/月,主流AI工具直接接入,Credits 统一计量
|
3月前
|
数据采集 人工智能 分布式计算
多Agent集群中的"情报官"设计:为什么系统需要一个RDD
在多Agent系统中,信息采集环节的失误往往是级联错误的根源。本文从行业实践和学术研究两个维度,论证了专职情报采集Agent的必要性,并详细解析了枢衡RDD(资源探测)的五大架构设计原则,包括与CAD的对抗性协作机制等。最后提供了一套可落地的自检清单,帮助开发者判断自己的Agent集群是否需要引入专职情报官角色。
|
3月前
|
人工智能 自然语言处理 安全
多AI聚合的五个常见误区:你以为的“交叉验证”可能只是“重复犯错”
本文剖析多AI聚合系统五大常见误区:盲目追求数量、迷信“少数服从多数”、误信数据天然独立、将分歧视为缺陷、幻想彻底消除幻觉。强调模型独立性、分歧价值与用户主动判别才是发挥聚合效能的关键。
329 5
|
4月前
|
人工智能 自然语言处理 供应链
为什么 MCP 在协议层会有 prompt injection的问题:工具描述如何劫持 agent 上下文
MCP(Model Context Protocol)虽成AI Agent主流集成标准,但其将工具描述全量注入上下文的设计,导致“Context Poisoning”——恶意指令可借工具元数据污染LLM推理。OWASP将其列为LLM应用头号漏洞,2025年已致超10万站点遭袭。根本风险在于协议层信任模型缺失,非清洗不可用。
333 12
为什么 MCP 在协议层会有 prompt injection的问题:工具描述如何劫持 agent 上下文
|
4月前
|
运维 Java 开发者
[015][web模块]基于Spring Boot的HTTP客户端日志与默认配置实战
本文详解基于Spring Boot的HTTP客户端统一配置方案,支持RestTemplate、RestClient与WebClient三种客户端,实现无侵入的日志记录(请求/响应头、状态码)、默认请求头注入(如X-Request-Id)、非2xx异常自动转换及链路追踪支持,全部通过Customizer与Filter机制自动装配,开箱即用,提升微服务调用可观测性与开发效率。(239字)
333 5
[015][web模块]基于Spring Boot的HTTP客户端日志与默认配置实战
|
3月前
|
人工智能 自然语言处理 测试技术
告别手动画图:用自然语言生成可直接发布的 SVG+PNG 技术图
`fireworks-tech-graph`它把技术图这件事,从一次性手工劳动,变成了一种可以沉淀、复用、批量生成的 Skill 能力。在 AI/Agent 相关内容越来越多的背景下,这是一个很值得试一下的项目。
433 10
告别手动画图:用自然语言生成可直接发布的 SVG+PNG 技术图
|
4月前
|
消息中间件 网络协议 测试技术
socket长连接在手游场景下的技术实践
本文介绍了37手游基于B站goim框架自研长连接系统的实践。系统采用分层设计,支持多协议和发布/订阅机制,用于直播弹幕、实时推送等场景,实现了高性能与业务适配。
265 4
socket长连接在手游场景下的技术实践
|
3月前
|
人工智能 缓存 安全
Claude Code全攻略 命令大全+三种工作模式+记忆体系+实战工作流详解
在AI编程工具飞速迭代的当下,Claude Code凭借终端原生运行、无需依赖笨重图形IDE、深度理解项目架构的优势,已经成为主流开发者必备的效率工具。它不只是简单的代码生成助手,更能独立完成项目解读、文件批量修改、终端命令执行、程序报错修复、版本仓库管理等全流程开发工作,轻量化占用资源,适配全系统运行。
718 7
|
3月前
|
供应链 安全 Linux
2026 年 5 月网络安全威胁复盘:Linux 漏洞、防御工具 0day 与供应链风险治理研究
本文剖析2026年5月全球网络空间五大高危威胁:Linux内核集中爆发CopyFail等漏洞、防御软件自身0day缺陷、路由器规模化僵尸网络、开发工具供应链投毒、高级精准钓鱼攻击。基于真实事件与PoC代码,提出覆盖终端、网络、供应链、人员的一体化主动防御框架,助力关键基础设施提升复合攻击抵御能力。(239字)
387 2