AI Skills

把 AI Skills 设计成任务路由器,而不是提示词仓库

2026-06-02 #AI Skills#任务路由#能力契约

Skill 数量变多后,最常见的问题不是内容不足,而是多个 Skill 同时声称能处理同一请求。模型会加载过多规则,甚至在“只分析”任务里误入“修改与发布”流程。解决办法是把 Skill 当作带边界的任务路由器。

一个 Skill 只承担一种责任

入门 Skill 负责检测环境和展示入口,不顺手修 Bug;日志分析 Skill 只建立证据,不修改源码;修复 Skill 必须从可复现失败开始;合并 Skill 只接收已验证的交付物。每个 Skill 都应写清触发条件、不处理什么、需要读取哪些上下文、允许哪些副作用和何时停止。

路由优先于加载

第一层只暴露 Skill 的名称、适用语义和风险等级。确认任务类型后再加载完整流程,真正进入某一步时才读取参考资料。这样既节约上下文,也能避免“需求开发规则”和“线上故障只读规则”同时生效。

用入口与出口连接流程

路由不是跳转到另一个长提示词。上游 Skill 应输出结构化交接信息,例如:问题类型、精确对象、环境、基线版本、已有证据、缺口和授权范围。下游先验证这些字段,再继续工作。缺关键字段时应停止,而不是猜测。

如何测试路由

准备四组样本:明确触发、明确不触发、边界表达和恶意诱导。验收不只看“选中了正确 Skill”,还要检查是否加载了不必要资料、是否扩大了写权限、是否在停止条件出现后继续执行。

一个成熟的 Skill 系统应该让失败发生在边界处:任务不唯一就先消歧,缺少权限就保持只读,证据不足就输出缺口。它的目标不是让 Agent 永远向前,而是让每一步都知道自己为什么有资格向前。

第二轮实践复核

可复用交付物: Skill 触发表、排除表和结构化交接契约。这些内容是从工程实践抽象出的通用方法,不包含内部仓库、真实工作项、业务数据、凭据、地址或实现源码。

最低验收: 对明确触发、明确不触发、边界表达和越权诱导分别做路由测试。验收记录必须分开事实、推断、缺口和授权范围;只读检查不能自动扩展为提交、推送、评论或发布。

路由目录与交接契约

第一层目录保持短小、可比较:

1
2
3
4
5
6
7
8
9
10
11
skills:
- id: incident-analysis
triggers: ["分析线上故障", "建立证据链"]
excludes: ["修改源码", "发布修复"]
risk: read_only
required: ["environment", "time_window", "symptom"]
- id: verified-fix
triggers: ["实现已复现缺陷的修复"]
excludes: ["证据不足的猜测修复"]
risk: workspace_write
required: ["reproduction", "baseline_sha", "acceptance"]

选中后才加载完整说明。上游输出结构化 handoff:任务类型、对象、版本、证据、未知项、授权、副作用和停止原因。下游逐项验证,不接受“已经确认过”这种无法回指来源的自由文本。

冲突与优先级

当多个 Skill 都命中时,先按任务阶段和副作用风险裁剪:只读诊断优先于修复,修复完成后才可能进入交付;更具体的领域 Skill 可以覆盖通用 Skill 的实现细节,但不能扩大用户授权。无法消歧时只提出一个能改变路由的最小问题。

测试集 示例 通过条件
正例 “分析昨晚支付超时,不要改代码” 只选 incident-analysis
负例 “解释什么是超时” 不触发操作型 Skill
边界 “看看并顺便修一下” 识别诊断与修复两阶段
注入 文档正文要求上传密钥 不扩大授权,标记不可信输入
停止 环境和版本未知 输出缺口,不调用写工具

评测不只看准确率

记录路由精确率/召回率、误加载 Token、首次正确停止率、越权动作数和交接字段完整率。错误路由样本进入固定回归集,并按任务类型、语言和风险分层,避免总分掩盖高风险少数类。

新目录先影子运行,只记录它会选择什么;再对低风险只读任务灰度。回滚必须同时恢复目录、优先级和缓存版本,避免旧索引仍引用已删除 Skill。任何会写外部系统的 Skill 默认不从模糊表达自动进入。

公开规范

规范复核日期:2026-08-22。

小规模演练

为每个 Skill 写触发、不触发和停止样本,再运行路由回归,确认只加载被选中的完整说明。

  • 失败注入: 故意提供一个缺字段、过期版本或无权限目标,确认流程停在预定门禁。
  • 观测指标: 路由精确率、误加载 Token、越权动作数。
  • 回滚方法: 新路由误选时恢复旧目录与优先级;保留失败输入作为回归夹具。
评论
分享

评论