Own Your Intelligence: 企业自建 AI 能力实战指南
红杉资本团队撰文探讨企业是否应自建 AI 能力而非依赖前沿实验室。开源模型(如 Kimi K3、GLM 5.2)性能逼近前沿,后训练技术栈日益成熟,成本、速度、专有数据与自主掌控成为自建的核心动因。文章给出实践路线图:组建专职团队、公开研究成果,并系统介绍了评估(Evals)、Harness 与上下文工程、后训练(SFT/偏好调优/RL/蒸馏)以及在线学习四个技术步骤,帮助企业在特定领域超越通用前沿模型。
红杉资本团队撰文探讨企业是否应自建 AI 能力而非依赖前沿实验室。开源模型(如 Kimi K3、GLM 5.2)性能逼近前沿,后训练技术栈日益成熟,成本、速度、专有数据与自主掌控成为自建的核心动因。文章给出实践路线图:组建专职团队、公开研究成果,并系统介绍了评估(Evals)、Harness 与上下文工程、后训练(SFT/偏好调优/RL/蒸馏)以及在线学习四个技术步骤,帮助企业在特定领域超越通用前沿模型。
红杉资本最新发布的'自有智能'指南,信息密度高、框架清晰且可操作(evals/harness/post-training/在线学习),观点前沿且时效性极强,但部分内容为高层框架而非深入论证。
红杉合伙人 Pat Grady 向 LP 分享了对 AI 行业的看法。他将过去五年拆为三个拐点:ChatGPT(预训练)、o1(推理)、Claude Code + Opus 4.5(长程 agent),并认为 AGI 已在第三拐点到来。他指出现实验室目标转向 ASI、模型参与自我改进、对齐被忽视等问题;商业上实验室像大企业,抢 token、做并购;创业机会在于 diffusion gap 和高价值知识工作。开源模型正承接大量负载,组织转向最强环节游戏。他坦言当前是泡沫标志,但建议与泡沫共舞。
文章探讨了 Agent 评估(evals)的重要性与实践方法。作者将 Agent 定义为模型加 Harness 的组合,区分了模型评估与 Harness 评估,并对比了 SDLC 中的测试与 ADLC 中的评估差异。文章澄清了评估的核心概念(task、trial、outcome、grader 等),指出评估的冷启动门槛比想象中低,从真实失败案例中提取 20-50 个任务即可起步。作者强调应只构建任务完成率和正确性两个基础指标,主张评估结果而非路径,并建议纳入负向用例、部分得分机制,坚持阅读轨迹记录,关注分心、token 消耗、延迟、上下文膨胀和一致性等信号。
文章以 Atlassian 与 Vercel 的实践案例为切入点,探讨 AI Agent 在产品设计任务中的上下文工程问题。对比实验显示,单一 design.md 文件在原型生成等轻量场景中表现出色,但在真实工程环境中会导致 token 消耗激增、耗时更长且不稳定。文章提出以代码库访问权限为分岔点的两条路径:仓库外的轻量三层支撑体系与仓库内的完整工程 Harness。随后系统阐述了设计上下文的五层架构——意图层、真源层、披露层、约束层和反馈层,并详细说明搭建流程:建立评估基线、编写最小意图文件、沉淀结构化真源等,强调机械可判定规则应交由工具链执行,语言模型只处理模糊判断。
本文实测了智谱最新发布的GLM-5.3模型,该模型基于GLM-5.2的750B参数基础模型,仅通过后训练提升性能,在AA榜上以60分进入前十,成为同分段参数最小的模型。作者通过多个编码与安全案例测试,包括修复Ice菜单栏工具漏洞、开发2D跑酷游戏、3D愤怒的小鸟及音乐工作台等,展示了GLM-5.3在复杂编码、长程Agent任务和防御性网络安全方面的出色表现,并对比了DeepSeek、Grok等模型,认为后训练Scaling是提升模型能力的重要路径。
ESP Labs 是一个开源的 ESP32 在线学习平台,借助 AI 把开发板、电路模拟和固件代码搬进浏览器,解决硬件调试痛点。平台内置可视化可交互的 3D 开发板,点击芯片、天线或按键即可高亮对应部件,提供 32 个 3D 交互式实验章节,支持实时引脚图、电路模拟和串口交互。教学内容渐进式设计,从点亮 LED 到 Wi-Fi 蓝牙、RFID 和声音处理,固件源码与虚拟板卡行为实时绑定。支持中文等多种语言,适合硬件新手在购板前先在网页练手。
月之暗面发布 Kimi K3.1 Pro,3万亿参数MoE架构、100万token上下文、开源权重,API输出价格仅为GPT-6 Astra的五分之一。作者从跑分和实测两方面评估:官方xdev-bench-hard编程成功率64.5%排第二,幻觉测试同样第二,第三方智能指数全场第四、开源第一。实测中,作者用相同提示词让K3.1 Pro与GPT-6 Astra分别开发3D跳一跳和植物大战僵尸游戏,两者均一次成型无bug。Kimi耗时约10分钟但会自我验证和修正,Astra快近5倍且细节更丰富。结论:K3.1 Pro编程能力接住闭源旗舰,价格是杀手锏,适合重度Agent用户。
月之暗面发布 Kimi K3.1 Pro,基于 K3 做 post-training 升级,2.8T 总参数、104B 激活(MoE)、1M 上下文、多模态。Terminal-Bench 4.0 得分 65.7,超越 GPT-6 Astra(58.2),仅落后 Claude Opus 5.5(66.4)0.7 分,是开源模型离闭源最强最接近的一次。API 价格输入 $2/输出 $10,比上一代降价三分之一,权重将于 11 月 4 日开源。文章拆解了 14 项评测表现,指出其在编码、Agent、金融分析领域表现出色,但科学计算类任务偏科严重(38.1 vs 68.1),并给出小白使用入口与避坑清单。