📚 Wiki 知识库

🏷️ 模型优化

6 篇

Claude 5 模型上下文工程新规则

文章探讨了针对 Claude 5 模型的上下文工程新规则,指出新一代模型能力提升,允许大幅简化系统提示。主要变化包括:用模型判断替代硬性规则、用接口设计替代示例、采用渐进式披露、简化工具描述、使用自动记忆以及支持丰富引用。

技术Claude ✍ Thariq🕐 2026-07-25

深度流形不是计划的

本文回顾了作者从Health AI到“深度流形”理论的研究历程。作者通过与导师石根华的探讨,发现神经网络与堆叠分片流形、不动点理论存在深刻联系。文章介绍了“蓝领智能”和“学习空间”概念,展示了通过理解学习空间大幅减少模型参数量的实践,并阐述了深度流形在AI数学框架及现实应用中的潜力。

技术AI理论 ✍ deep Manifold🕐 2026-07-21

Adam's Law:为何高频表达能解锁 LLM 的最强性能

文章介绍了 FaceMind 团队提出的 Adam's Law(文本频率定律),即在语义不变前提下,使用预训练语料中频率更高的表达方式能显著提升 LLM 表现。该发现通过 100 种语言和四大核心任务得到验证,并指出当前数据工程忽视了“频率”这一关键维度。Anthropic 的 Claude Opus 4.7 更新间接验证了这一理论。

技术LLM ✍ Berryxia.AI🕐 2026-05-30

LoRA - LLMs 的低秩适配详解

文章详细介绍了 LoRA (Low-Rank Adaptation) 技术,这是一种用于高效微调大型语言模型的方法。通过冻结原始权重并学习两个极小的低秩矩阵,LoRA 能够在保持模型性能的同时,大幅降低显存占用、训练成本和存储空间。文章还解释了 LoRA 的核心数学原理、具体实施步骤以及为何全量微调成本高昂的原因。

技术LLM ✍ Amit Shekhar🕐 2026-05-08

Hermes 给我的最大启发:上下文不是仓库,是工作台

本文指出 Agent 表现不佳往往是因为上下文管理不当,而非模型能力不足。文章引用多项研究证明长上下文不等于高效,并提出应像管理“工作台”而非“仓库”一样管理上下文。作者结合 Hermes 的实践,介绍了外部化记忆、子任务隔离、技能沉淀等策略,并重点推荐使用 XCrawl 等工具清洗网页噪声,以实现低噪、高效的 AI Agent 工作流。

技术Hermes ✍ 泊舟🕐 2026-04-28

AI App 省钱指南:如何将月度账单控制在 1700 美元以内

作者分享了运营两个拥有 39 万用户的 AI 应用的实战经验,通过模型路由策略和智能缓存技术,成功将 AI 成本控制在每月 1700 美元。文章详细剖析了不同 OpenAI 模型的成本差异,并提供了针对简单、中等和复杂任务的最佳模型选择指南。

技术LLM ✍ Alex Nguyen🕐 2026-04-16