Math Behind Large Language Model
本文介绍了大语言模型背后的数学原理，涵盖Attention机制、缩放因子、反向传播、梯度下降、交叉熵损失、RoPE位置编码和RMSNorm归一化等核心概念。
技术 / LLM
504 篇
Kimi K3 memory savings vs Jevon's paradox
本文深入分析了Kimi K3通过Kimi Delta Attention (KDA)技术实现的内存节省突破，对比了传统MLA和DeepSeek的架构，讨论了其在长上下文场景中的优势及对行业的影响。
上下文工程规则已变：Anthropic 删减 80% 指令的实践
Anthropic 工程师 Thariq Shihipar 分享了构建 Claude Code 的发现，团队删除了 80% 的系统提示词后性能未受损。文章介绍了“4层上下文审计”框架，指导如何清理常驻指令、记忆、知识文件等冗余信息，以适应新模型的高推理能力，避免过度指令导致的性能下降。
The Beliefs That Determine Whether You Succeed With AI
文章探讨了影响人们成功使用AI的五种常见信念，并通过研究数据和案例分析，揭示了如何通过改变思维模式来克服对AI的抵触情绪，从而更有效地利用AI提升工作效率。
如何利用 AI 让你变聪明而不是变笨
文章探讨了如何通过特定的提示词将 AI 从应声虫转变为思考伙伴。作者指出，AI 默认倾向于附和用户，这可能导致思维懒惰。为此，文章介绍了三个提示词：解构模糊概念的 Unbundle Prompt、构建最强反驳观点的 Steelman Prompt，以及模拟挑剔客户的 Secret Shopper Prompt，以此帮助用户通过对抗性思考来打磨观点，提升智力。
零基础 4 个月成为可受雇 AI 工程师的路径
文章介绍了一条 4 个月从零基础成为 AI 工程师的学习路径。文章指出 AI 工程岗位增长迅速且薪资优厚，学位要求正在降低。作者强调职业转型者具备判断力和沟通能力的优势，并指出了初学者常犯的错误，如过早钻研理论、只看不练等。
BestBlogs 早报 · 07-29｜MCP 无状态化与多智能体编排成本
本期早报探讨 MCP 协议的无状态核心变化与 Claude 的生产化接入，分析 Codex 与 ChatGPT Work 共用的执行框架差异，并审视多智能体并行中上下文搬运的隐性成本“编排器的税”。同时涵盖图工程、vLLM 商业化及 Uber 零增长架构等速览内容。
Alignment Unlocks Scaling：Qwen-Robot Suite 的设计原理和背后的思考
文章介绍了Qwen团队推出的Qwen-Robot Suite，包含Qwen-RobotNav、Qwen-RobotManip和Qwen-RobotWorld三项工作。核心思想是通过解决具身智能中异构数据的对齐问题，实现模型的规模化扩展，并在多项基准测试中取得SOTA结果。
上海交大团队出品的大模型实战开源课程
上海交大团队推出的大模型实战开源课程，在GitHub获4.6w+ star。课程从零开始设计，包含API调用、模型微调、多模态开发等模块，配套在线实验环境，适合系统学习大模型知识。
做完一次总体设计后，我重新理解了企业级知识库
文章基于企业级智能知识库项目的实践，探讨了企业知识库的真正门槛。指出其不仅是文档存储，更是一套涵盖构建、治理、使用和优化的闭环运行机制。重点分析了知识库与知识空间的区别、知识生命周期管理、可信溯源及权限控制，强调知识库应作为支撑未来 Agent 的企业级 AI 知识引擎。
CAG：缓存增强生成，RAG的替代方案
文章介绍了缓存增强生成（CAG）作为一种替代经典RAG流水线的新方案。CAG通过将全部知识预加载到模型上下文并缓存KV Cache，显著提升响应速度，解决检索延迟和召回缺失问题。适用于中短篇幅静态文档，但对大规模或频繁变动数据仍需传统RAG或混合架构。
How I Make Money From AI Girls Using Prism + Claude! (2026 Guide)
作者分享如何利用 Claude 和 Prism 工具构建自动化 AI 女生账号并通过 Fanvue 变现的经验。文章详细介绍了从角色定位、内容生成到营销推广及自动化运营的全流程，展示了每天仅工作 40 分钟即可月入超 5000 美元的实战结果。
6名学生7天AI学习实验开源框架
作者将6名学生7天AI学习实验整理成开源框架，包含信息采集、路径生成、动态调整Prompt及质量检查表，旨在帮助迷茫学生建立学习路径，欢迎社区共同验证迭代。
吴恩达官宣新公司 LearnVector
吴恩达宣布成立新公司 LearnVector，获 Coursera 1 亿美金投资。公司旨在利用 AI 技术将教育从“一对多”转变为“一对一”的个性化学习模式，强调通过专属学习向导提升学习效果，而非简单替代学生完成任务。
Kimi K3 技术报告拆解：全球首个开源 3T 级模型
本文拆解了 Kimi K3 的技术报告，这是一个全球首个开源的 2.8 万亿参数模型。文章详细解析了其混合注意力架构、注意力残差机制、MoE 设计以及在长文本训练和推理优化上的创新。报告指出 K3 性能虽略逊于顶级闭源模型，但在多项任务中表现优异，且具有极高的成本效率，甚至已能辅助团队进行内核优化和芯片设计。
Claude Opus 5 提示工程大师课
文章详细解读了 Anthropic 发布的 Claude Opus 5 模型及其官方提示指南。核心内容包括“Effort（努力）”设置的使用、从“怎么做”转向“为什么”的提示策略、删除验证指令以降低成本、以及如何控制响应长度和 Agent 叙述行为，旨在帮助用户最大化发挥模型效能。
From GPT2 to Kimi3, Explained
文章回顾了从 GPT-2 (2019) 到 KimiK3 (2026) 的大语言模型架构演进，重点对比了参数规模从 1.24 亿到 2.8 万亿的巨大跨越。深入解析了 GPT-2 的 Transformer 解码器结构、KV 缓存机制，并探讨了线性注意力机制在降低计算复杂度方面的原理与权衡。
PagedAttention & RadixAttention
本文深入探讨了 PagedAttention 和 RadixAttention 两种技术。PagedAttention 通过类似操作系统的分页机制管理 GPU 内存，解决 KV Cache 的内部和外部碎片问题，显著提升并发处理能力。RadixAttention 则利用基数树索引缓存的前缀状态，实现跨请求的计算和内存复用，进一步优化推理性能。
被王虹刷屏的两天
文章包含两则短讯。前半部分反思了不合群想法的价值，指出吃苦并非成功的途径，找到适合的位置更重要。后半部分讨论了RAG技术在小型企业中的应用，认为文档本身的可信度问题比检索技术更关键，提出应关注运行时Policy的开发，而非过度纠结于检索链路。
本周顶级 AI 论文精选
文章精选了本周 6 篇顶级 AI 论文，涵盖 Harness Handbook、MSCE 记忆技能框架、PRO-LONG 长程记忆机制、Anthropic 全局工作空间解释性研究、Meta 的 GAMUT 完整性基准测试以及渐进式披露模式。
GEO 流量密码因子之一：Fan-out Rank
本文深入解析了 GEO（生成式引擎优化）中的核心概念 Fan-out Rank。文章阐述了 AI 搜索通过查询改写和查询扩散将用户主查询拆分为多个子查询的机制，并详细介绍了如何利用 ICP 筛选出高价值的“金矿词”，以及通过结构化内容和外部信源建设来提升 GEO 流量的实操策略。
AI 超级周期经济学(二)：为什么 AI 并没有立即提升公司效率？
文章通过电力革命和PC普及的历史案例，指出AI短期内未提升生产率的原因在于工作流程未被重构。Databricks CEO通过案例说明，只有彻底改变组织流程和协作模式，才能释放AI带来的20倍效率提升。
如何用AI杠杆撬动外语口语进步的飞轮
作者构建了一套低成本英语口语学习系统，整合ChatGPT Live、Codex、Mac mini和PWA。通过自动化工作流将口语练习转化为结构化反馈，实现数据同步与复盘，解决了传统口语陪练成本高、反馈难追踪的问题，打造个人专属的AI学习闭环。
炸裂，Anthropic 给 Opus 5 删掉了 80% 的系统提示词
Anthropic 团队将 Claude Code 的系统提示词删减了 80%，但编码评测没有损失。文章指出，许多规则是为老模型打的补丁，已过时。最佳实践转向：用锚点代替禁令，用接口设计代替举例，以及渐进披露。建议开发者清理“拐杖”型规则，保留护栏与品味，用评测集支撑删除决策。
如何用AI写出引人入胜的故事钩子
文章介绍了如何利用AI生成引人入胜的故事钩子，以传奇文案大师John Carlton的方法为灵感。通过深入调研和挖掘独特故事细节，再结合Claude的提示词，可以创作出具有视觉冲击力和强迫性的钩子，提升内容吸引力。
如何制作AI电影并登上院线
本文介绍了如何利用AI工具制作动画电影并参加电影节的完整流程。作者列举了六个关键工具（Claude、Runway、Midjourney等），详细说明了从剧本创作、角色设计到后期制作的步骤，并分析了该领域的变现潜力和参赛注意事项。
如何让 Claude 像博士生一样研究：斯坦福 STORM 方法
文章介绍了斯坦福大学开发的 STORM 研究系统，该方法通过多视角提问和信息检索生成高质量文章。作者将其简化为 4 个提示词，让用户能在 5 分钟内利用 Claude 生成类似博士水平的深度研究报告，包含视角分析、矛盾映射、综合综述和自我评估。
AI 安全综述：四种恐惧与证据的重量
文章深入探讨了 AI 安全领域的四种核心恐惧：滥用、日常失效、失控及结构性风险。作者区分了 Security 与 Safety 的概念，并以证据强度为线索，剖析了从生化武器制造、网络攻击到模型对齐造假等具体问题，强调舆论关注与真实风险之间的错位。
2026年如何成为AI工程师（无需CS学位）
文章指出2026年AI工程师角色已分化为机器学习工程师和应用AI工程师。对于非CS学位求职者，后者是主要机会。文章详细列出了必备技能（Python、LLM行为、RAG系统、评估观测），并提出了三个能替代学历证明的实战项目建议。
如何教授 AI 模型
文章通过人类学习的类比，通俗易懂地解释了 AI 模型如何学习新技能和行为。它涵盖了从预训练、监督微调到强化学习的三个阶段，以及通过基准测试评估模型和通过模型规范对齐模型行为的重要性，最后指出了当前模型在持续学习方面的局限性。