OpenRouter 发布 AI Agent 回归测试指南
OpenRouter 发布教程,讲 Agent 在 prompt、模型、工具定义或检索设置变化后如何做回归测试。核心做法:锁定一组固定用例,每次改动后重跑,并对照书面行为契约检查;每个用例带结构化断言(Agent 调了哪个工具、传了什么参数),有策略时还要检查硬性不变量。模型替换时只换模型,prompt、工具、用例、评判器和推理参数全部保持不变,并用具体模型 slug(如 anthropic/claude-fable-5.1)而非 ~author/family-latest 别名,避免模型在两次运行之间悄悄变化。先…
推荐理由做 Agent 的可以直接照搬:用具体模型 slug 锁版本,先看基线列再判断是否阻止发布