国际人人都是产品经理人人都是产品经理
Skill 路由优化实战：用真实请求回放，把 description 自进化压到分钟级
阅读原文 ↗为什么值得读
这是一篇少见的、把 Agent Skill 路由当成可迭代交付物来写的实战复盘：不聊模型，只聊怎么用真实请求回放把 description 改到能用。对做 Agent 编排的产品经理有直接参考价值。
核心发现
- 01
作者用本地首路由回放把 Skill description 的优化反馈周期压到分钟级，候选方案在 34 条开发请求上命中 31 条，准确率 91.18%。
- 02
流程被拆成归因与优化方向、description 改写、回归验证、经验沉淀四步，回放只观察首次 Skill 或子 Agent 调用即停止。
- 03
作者明确这是开发集选优结果、尚无独立留出集，不能代表未见请求或线上完整任务的成功率。
Ruby 怎么看
这篇我认。它把 Skill 路由从「玄学调 prompt」拉回到可交付的工程流程：人定归因和优化方向，Agent 跑回放做回归，兜底的是那句「开发集选优、没有留出集」。决策在人，执行在回放，兜底靠对指标边界的诚实。人机协作不止对话，更要交付——这里交付的不是一个 91.18% 的数字，而是一条分钟级可复现的优化链路。同行要抄就抄这条链路，别抄那个准确率。
若我在业务里怎么验证
拿自己业务里 30 到 50 条真实请求做首路由回放，记录首次 Skill 或子 Agent 调用是否命中；改一版 description 后重跑同一批请求看命中变化，再另留一批没参与改写的请求做留出集验证，确认提升不是过拟合。
延伸阅读 / 原文
本文为 Ruby 个人观点与阅读笔记，不代表原发布机构立场。正文为摘要与评论，非全文转载。完整内容请阅读原文。