Wiki 知识库

全部文档 / 标签: Trajectory

3 篇
清除

AI Agent 跑通了,怎么证明它真的可以上线?

文章指出 Agent 最危险的失败不是报错,而是做错了却显示"已完成"。作者以一个资料研究 Agent 为例,搭建了一套最小可用的 Agent 评测框架,回答三个问题:任务有没有做成、失败发生在哪里、新版本能否发布。核心方法包括:先明确评测要回答的发布决策;把"做完"写成可检查的完成条件和 Hard Failure;建立 30 条起步的分层评测数据集(dev/holdout/regression/challenge);将 Outcome 与 Trajectory 分开评估;采用 Rules + LLM Judge + Human 三层打分体系。最终通过重复运行对比 v1/v2、设置发布门禁、把线上失败送回评测集,形成完整评测闭环。

技术 › Agent Cloris 🌱 2026-09-0426.4 KB 319.9K 512 85

我用了半年 Hermes,换 DeepSeek Harness 只花了一个下午

本文是作者从 Hermes 迁移到 DeepSeek Harness(dsh)的实战笔记。作者通过 8 组功能对照(Profile、Goal、execute_code、delegate_task、后台进程、Cron、Skill、上下文管理),展示了 dsh 与 Hermes 的对应关系,并指出真正需要重新学习的三样新东西:Trajectory、Session Fork 和 Dynamic Cordis。文章还讨论了 dsh 的插件化架构、社区争议及上手门槛,强调方法比工具更持久。

技术 › Harness Engineering 老爸的AI联萌 2026-08-1715.7 KB 15.7K 61 85