Wiki 知识库

全部文档 / 标签: 验证循环

3 篇
清除

Thinking in Systems, Shipping in Loops

文章引用 DHH 的观点指出,手写代码对绝大多数程序员已不再经济,软件工程正演变为系统架构设计。通过 Artemis 和 SpaceXAI Grok 团队的案例,说明工程师如今通过设计验证循环(verification loops)让 AI 大规模正确地编写代码——如 Lauren Tan 每月发布 2000 个 PR。文章借鉴 Donella Meadows 的系统理论,提出优秀系统设计的三大特性:韧性(AI 通过测试、审查代理和生产可观测性自我校验)、自组织(循环学习将失败类型转化为新技能)和层级(将技能、工具与沙箱组合成可复用组件)。工程师的新职业是'驾驭智能'。

技术 › Agent Tomasz Tunguz 2026-09-252.9 KB 18K 300 59

Harness Engineering: 2026年取代提示词工程的核心技能

文章指出,2024年的核心技能是提示词工程,2025年是上下文工程,而2026年两者已被吸收进Harness Engineering。88%的企业AI Agent项目无法上线,问题几乎不在模型,而在模型外围的执行层。作者详细阐述了生产级Harness的七层架构:工具编排(草稿-提交模式防止危险操作)、验证循环(制作者与检查者分离)、上下文与记忆管理、护栏(行为/数据/工具/运营四类控制)、可观测性等。并以Anthropic Claude Code质量退化为案例,说明问题源于Harness层而非模型本身,强调Harness设计才是AI Agent产品质量的决定性因素。

技术 › Harness Engineering chuplung 2026-09-1515.5 KB 1.3M 552 78

What PMs need to know about verification loops in software factories

本文探讨了在软件工厂中验证循环(verification loops)对产品经理(PM)的重要性。文章指出,随着AI代理的普及,人类不再直接提示模型,而是通过编写循环让代理自主工作。验证循环是代理工作、评分、再工作的迭代过程,其中评分器(grader)是关键部分,PM应参与定义评分标准,以确保产品符合用户需求。文章详细介绍了验证循环的五个组成部分、五种评分方法(确定性检查、LLM作为评委、浏览器视觉验证、模拟环境和离线实验),并举例说明如何在构建循环和优化循环中应用这些方法。最终强调,PM在优化循环中可以利用验证循环来评估产品上线后的用户行为,从而推动产品改进。

技术 › LLM Amplitude 2026-08-2012.1 KB 1.7K 14 76