如何更科学、方向可控的实现 Skill 的「自进化」- Digest
- 原文链接:https://mp.weixin.qq.com/s/2Cq0QR3vcKlMHkI0XyYYrw
- 来源:微信公众号 / 阿里妹(飞樰,深度技术综述)
- 发布时间:2026-06-09 08:30
- 获取时间:2026-06-09
一句话总结
Agent Skill 进化正从”经验主义”走向”科学工程”路径——三大里程碑式方案:Trace2Skill(归纳法聚合 + 硬约束合并)/ EvoSkill(三角色闭环 + 前沿集合 + 验证 gate + 负反馈历史)/ SkillOpt(Skill 即参数 + 学习率约束 + 验证 gate + 动量 + 元学习);实际业务中混合策略(Trace2Skill 快速基线 + EvoSkill 扩充 + SkillOpt 精修)可能是更好的解法。
三大范式速查
| 范式 |
论文 |
核心思路 |
类比 |
| 归纳法 |
Trace2Skill(阿里千问) |
并行看大量轨迹 → 合并为完整无冲突 Skill |
专家开会合并意见 |
| 自验证 |
EvoSkill(Sentient Labs) |
三角色闭环 + 前沿集合 + 验证 gate |
自然选择进化 |
| 训练范式 |
SkillOpt(微软+高校) |
Skill 即参数 + 学习率 + 验证 gate + 动量 |
带 momentum 的 SGD |
8 个知识节点速查
| 节点 |
一句话 |
| Skill-自进化痛点 |
单通轨迹会”带偏” / 企业级”质量飘忽不定、越优化越差” |
| 离线优化在线验证 |
企业级标准做法 / 本质仍由人指导、不是真正自进化 |
| Trace2Skill-归纳法 |
并行 A+/A− 分析师 + 层次归并 + 硬约束 |
| EvoSkill-自验证 |
三角色 Pipeline + 容量固定精英池 + 验证 gate |
| SkillOpt-训练范式 |
Skill 即参数 + 学习率约束 + 6 大核心组件 |
| 前沿集合-Frontier |
容量固定精英池,跑赢最弱才进入 |
| Skill-即参数 |
把文本优化对标为模型训练,引入优化器 Agent |
| 可验证性-飞轮 |
模型效果衡量越可验证 = 迭代越快(Claude/GPT/Qwen 2026 提速根因) |
5 个金句
-
“单纯的基于个例轨迹来实现自动更新,同样很容易让 Skill ‘过拟合’,陷入局部情况,甚至’越优化越差’。”
-
“在企业级场景下,靠体感是不可持续且无法规模化(Scaling)的。”
-
“Agent 进化从经验主义走向科学工程”
-
“可验证闭环一旦打通,迭代速度才能从’人力驱动’转变为’算力驱动’。”
-
“也许,混合策略可能是比较好的解法——用 Trace2Skill 快速生成基线,用 EvoSkill 持续扩充技能库,再对核心瓶颈模块使用 SkillOpt 进行精细打磨。”
3 大学派核心差异
| 维度 |
Trace2Skill(归纳) |
EvoSkill(自验证) |
SkillOpt(训练) |
| 关键动作 |
并行处理 + 层次化合并 |
前沿集合 + 失败驱动提案 |
学习率约束 + 验证 gate + 负反馈 buffer + 元学习 |
| 学习率 |
❌ |
❌ |
✅ |
| 动量 |
❌ |
❌ |
✅ |
| 元学习 |
❌ |
反馈历史 H |
Meta-Skill |
| Harness |
ReAct |
底座 Harness |
Harness 无关 |
| 优势 |
一次成型,效率高 |
可解释性强 |
可控性最强 |
| 风险 |
合并器要够强 |
收敛慢 |
组件太多,强依赖验证集 |
选型建议
- 简单 + 快速落地 + 规律明显 → Trace2Skill 性价比最高
- 效果有明确要求 + 完善自动化评估 → EvoSkill / SkillOpt 更适合
- 复杂业务 → 混合策略:Trace2Skill 快速基线 + EvoSkill 扩充 + SkillOpt 精修
核心洞察:可验证性 = Agent 飞轮
Claude / GPT / Qwen 2026 年迭代越来越快 = 模型效果衡量越来越可验证
Agent 飞轮 = “Agent 产生轨迹 → 自动化验证给出即时反馈 → 根据反馈快速调整 Skill → 新 Skill 再次进入验证循环”
只有验证闭环打通,迭代速度才能从”人力驱动”转变为”算力驱动”。
与已有文章的关联
- 强关联:
- [[02-ai-coding/买了一样的AI为什么别家的比你的强]](Hiten Shah Skill 战略 → 本篇是工程化实现)
- [[01-ai-agents/agent-skills-systematic-survey]](Skill 综述 → 本篇是”自进化”专门深入)
- [[02-ai-coding/谷歌开源agent-skills]](开源实现 → 本篇是学术 + 开源进展)
- [[01-ai-agents/Skills驱动推理新范式]](TRS Skill 卡片 → 本篇是 Skill 体系的下游进化范式)
- [[02-ai-coding/从Prompt-Context到Harness-工程的三次进化与终局之战]](Harness 思想延伸到 Skill 训练)
- 同级:
- [[02-ai-coding/Notion-spec-driven-AI-workflow]](spec-driven 是 Skill 自进化的对照)
- [[02-ai-coding/Agentic-Engineering-AI-Workbench]](可验证性 = AI 工作台”验证”层的科学化版本)
- [[01-ai-agents/agent-architectures]](Agent 架构层 vs Skill 进化层)
- [[01-ai-agents/harness-engineering]](Harness 视角 vs SkillOpt “Harness 无关”)
- [[01-ai-agents/Harness工程AgentLoop]](Harness Agent Loop → SkillOpt 引入”训练范式”是 Loop 范式的延伸)
- [[01-ai-agents/AI-PM核心技能-观测评估与反馈闭环]](评测体系是 Skill 自进化的基础)
5 个对 Seetong 团队可借鉴的动作
- 把团队”调 prompt 经验”沉淀为 Skill(不只停留”群里贴一个 prompt”)
- 收集”修 bug / 处理报警”轨迹(类似 Trace2Skill 思路)
- 核心脚本的”最佳实践”用 SkillOpt 思路打磨(bounded 编辑 + 验证 + 灰度)
- 建立内部评测体系(AI Coding 类天然可验证——编译通过/单元测试通过/截图比对)
- 关键判断(spec / 边界 / 验证回路)做”可验证化”(从”PM 体感”到”30 个用户样本的对照评测”)