Wiki 知识库

全部文档 / 作者: Viv

2 篇
清除

How we Build Agent Environments & Tasks

本文是 LangChain 团队关于构建合成 Agent 环境与任务的实践指南。文章提出一个两步流水线:第一步通过 traces、代码和人工输入生成详细的任务 spec;第二步将 spec 转化为评测任务及其运行环境。核心概念包括“World Spec”用于沉淀跨任务的共享知识、脚本与定义,整个流程高度迭代。该方法已封装为 eval-engineering skill,供各团队自主搭建 Agent 评测基准,从而更高效地识别回归、优化 Agent 表现。

技术 › Agent Viv 2026-08-2514.7 KB 101.3K 382 79

Towards Automating Eval Engineering

文章介绍了Eval Engineering Skill,这是一个帮助编码代理使用仓库上下文和代理跟踪构建评估的技能。该技能通过检查代理结构、挖掘模式并与用户交互,生成可执行的Harbor格式评估。文章还强调了迭代设计评估的重要性,以及容器化评估在持续学习中的作用。

技术 › Skill Viv 2026-07-236.9 KB 487.5K 890