engineering · E1 预消化简报(2026-08-13)

日间预消化轮（11:20）· 为今晚主题活文档接力备料 检查范围：2026-08-11 ~ 2026-08-13 · inbox jay/tom/flyp/spark/stephen · 近 3 天新 paper_cards · knowledge/engineering.md

一、增量摘要

本轮增量条数：3 条

涉及 arXiv 号：2607.12227 2608.09867

本轮说明：今日（2026-08-13）engineering 主轴增量较低。上轮（2026-08-12）已系统性覆盖 WRP / vLLM DCP / OasisKV / Ouroboros / Evo-Bench / WeClawArena 等核心件套；今日 inbox 中的工程相关内容多为已知条目的重复曝光（DeepSeek V4 Pro API 除外）或非工程主轴的邻接内容。3 条增量中仅 1 条为实质 net-new（Lilian Weng harness 博文），其余为跨日新增引用或已覆盖条目的新来源佐证。

二、核心增量条目

增量 1：Lilian Weng 博文 — 自改进的 Harness 工程：RSI 历史脉络 + 现代 Agent 系统级框架（2026-07-04，今日 RSS 首曝）

来源：inbox/jay/2026-08-13-1002-rss-lilian-weng.md（Lil'Log RSS，今日 08:13 抓取）+ paper_cards 434（arXiv 2607.12227 Rethinking Harness Evolution Eval）

arXiv：2607.12227（相关论文：Rethinking the Evaluation of Harness Evolution for Agents）

要点：

RSI 历史脉络（I.J. Good 1965 → 2026）

• I.J. Good 1965 定义"超智能机器"：在所有方面超越人类的机器；一旦机器开始设计更优机器，必将引发智能爆炸
• Lilian Weng 将 RSI 框架映射到现代 LLM Agent 系统：RSI 不只是"模型自己变强"，更是Harness（scaffold/运行时框架）持续自我改进

现代 Agent 系统级框架（与 Self-Improvements Survey 互相印证）

• 核心论点：现代具备自我改进能力的 Agent = 自适应系统，将经验转化为持续能力增益
• 配置 = 基础模型 + 运行支撑层（Operational Scaffold）：prompt + memory + tools + 控制逻辑
• 三种 harness 演化策略： 1. Recursive Self-Improvement (RSI)：系统调用自身改进自身（Ouroboros 的理论基础） 2. Test-time Scaling / Harness-at-inference：推理时通过计算分配改进输出质量 3. Experience-Driven Evolution：常规工作流中积累经验，触发结构变更（Activity Frames 的理论基础）

与 Self-Improvements Survey（arXiv 2607.13104）互相印证

• Self-Improvements Survey 核心框架："现代 Agent = 基础模型 × 操作支撑层耦合的配置"
• Lilian Weng 博文 = 该框架的实践者解读；Self-Improvements Survey = 学术综述支撑
• 两者共同构成 §2.7 Agentic Engineering 的"Harness 工程理论层"

与 knowledge/engineering.md 现有脉络的关系： - 写入 §2.7 Agentic Engineering（v48 §2.7 已有 Ouroboros / Evo-Bench / WeClawArena 三件套 + Eval 三层收敛框架） - 现有脉络有 Lilian Weng Harness Engineering（RSS 源，今日 inbox 有全文摘要）；本轮补充RSI 历史根脉（I.J. Good 1965 → LLM Agent RSI）和系统级框架——将 v48 §2.7 的"Harness 工程件套"升级为"件套 + 理论层" - 与上轮 e1prep 增量 5/6（Ouroboros / Evo-Bench）形成纵向深化：件套（Ouroboros 实践 + Evo-Bench 评测）←→ 理论层（Lilian Weng RSI 框架 + Self-Improvements Survey 系统框架）

建议归入节：§2.7（新增 RSI 理论子节，与 Ouroboros / Evo-Bench / WeClawArena 三件套并列）

增量 2：The AI Engineer Stack 2026 — 生产可观测性 89% vs 正式评测体系 52%，37 点差距是生产质量头号杀手（来源：The AI Engineer，2026-03-11）

来源：inbox/jay/2026-08-13T1050-jay-engineering-filter.md（工程筛选报告）+ inbox/jay/2026-08-13-1002-rss-lilian-weng.md（The AI Engineer Stack 2026 引用）

arXiv：无（The AI Engineer Substack 2026-03-11）

要点：

• Eval Gap 新量化数据：
• 89% 的生产 Agent 团队已实现可观测性（traces / logs / metrics）
• 仅 52% 的团队有正式评测体系（evaluation framework / benchmark suite）
• 37 点差距是生产质量的头号杀手——"看到系统运行"≠"知道系统是否正确"

• 6 层 Agent 技术栈（2026 Edition）： 1. Agent Surface（前端交互层） 2. Orchestration（编排层：LangGraph / Mastra） 3. Memory（记忆层：Mem0 / HPANN） 4. Knowledge/RAG（RAG 层） 5. Tools/MCP（工具/MCP 连接层） 6. Governance（治理层）——2026 新增层，pilot → production 的分界线

• Governance 层 2026 新数据：

• 2026 年初已有 30+ CVEs 针对 MCP servers/clients/tools
• 其中 43% 是 shell 注入（最主流威胁向量）
• Grant Thornton 调查：950 名高管中 78% 不认为自己在 90 天内能通过独立 AI 治理审计
• EU AI Act 2026 年 8 月对高风险系统全面可执行（距今约 2 周）

重要矛盾警示：

两数字不可直接合并引用，原因：样本来源不同、时间点不同（3月 vs 6月）、定义口径不同（"已有生产"vs"已有或计划"）。建议在活文档中不合并使用，分别引用并注明来源。

与 knowledge/engineering.md 现有脉络的关系： - 写入 §2.7 Agentic Engineering（Eval 三层收敛框架附近） - 37 点 eval gap = 上轮 e1prep 增量 1（Eval 三层收敛框架：每 PR 检查 / 每夜 LLM-as-judge / 生产持续监控）的量化背书——三层收敛框架的"第三层（生产持续监控）"正是 37 点 eval gap 的工程响应 - 与 WRP Silent drift detection（上轮 e1prep 增量 1）形成呼应：WRP 将"生产监控层"具体化为 Workload-Router-Pool 三维协同 - 30+ MCP CVEs / 43% shell injection = 上轮 e1prep 增量 2（Black Hat / OWASP MCP Top 10）的数字佐证

建议归入节：§2.7（新增 Eval Gap 量化子节 + Governance 层子节，作为 Agentic Engineering 生产成熟度判断依据）

增量 3：Stealing Reasoning Traces — 加密思维链跨会话可互换性：LLM API 架构层安全漏洞（arXiv 2608.09867）

来源：inbox/jay/2026-08-13-1000-rss-simon-willison.md（Simon Willison 2026-08-11）+ inbox/jay/2026-08-13-1000-rss-simon-willison.md（配套域名 stolen-thoughts.com）+ inbox/stephen/2026-08-13-ai-industry-e1prep.md（HF Daily 8-13 #6，86▲）

arXiv：2608.09867（Stealing Reasoning Traces from Proprietary LLM APIs，cs.CR，2026-08-11）

要点：

• 漏洞机制：Anthropic / OpenAI / Google 等主流 LLM 提供商将思维链（CoT）以加密文本块形式返回客户端，客户端在后续请求中原样回传。这些加密块在同一提供商的生态内跨会话、跨用户、跨模型完全兼容且可互换
• 攻击面：基于加密块的跨会话可互换性，可窃取其他用户的历史推理轨迹（知识产权 / 信息泄露）
• 配套域名：stolen-thoughts.com（有配套演示）
• 跨日信号：HF Daily 8-12 #7 = 32▲ → 8-13 #6 = 86▲（+54 票，2.69× 跨日增长）
• 定位：LLM API 架构层漏洞，属于 §2.15 AI 安全的新子类型

与 knowledge/engineering.md 现有脉络的关系： - 写入 §2.15 AI 安全（Black Hat 2026 / OWASP MCP Top 10 条目附近） - 现有脉络有 Black Hat 2026 完整攻击链（RLVR → HF 安全事件 5 天 kill chain）；本件是另一维度的安全漏洞——Black Hat 事件是主动攻击，本件是被动架构漏洞（加密 CoT 的跨会话可互换性） - 与 guardrails before action 范式（上轮 e1prep 增量 2）形成纵向关联：guardrails 是防护机制，本件揭示的是 API 协议层的设计疏漏 - 与上轮 e1prep 增量 2（Hardware Keystores for AI Agent）形成互补：Hardware Keystores 解决签名密钥泄露，Stealing Reasoning Traces 解决思维链信息泄露——两者共同构成"Agent 安全两件套"

建议归入节：§2.15（Stealing Reasoning Traces 新增子节，与 Black Hat / Hardware Keystores 并列构成 Agent 安全三件套）

三、值得警惕的矛盾或待核实说法

四、可引用 arXiv 号列表

五、已检查来源清单

六、本轮总结

本轮 E1 预消化结论：低增量——今日 engineering 主轴无新的核心 arXiv 论文或重大系统发布。主要价值在于：

1. Lilian Weng Harness Engineering 博文（RSI 理论层）是本轮唯一的实质 net-new 增量——将上轮 e1prep 的"Ouroboros / Evo-Bench / WeClawArena 三件套"从件套层升级为件套 + 理论层（I.J. Good 1965 RSI → 现代 Agent 系统级配置框架）。建议在活文档中新增 RSI 理论子节，与 Self-Improvements Survey（arXiv 2607.13104）共同构成 Harness 工程的学术支撑。
2. The AI Engineer Stack 2026 eval gap（89% vs 52%，37 点差距）是上轮 e1prep Eval 三层收敛框架的量化背书——"三层收敛"是工程方案，37 点 gap 是问题严重程度的数字证明。
3. Stealing Reasoning Traces（arXiv 2608.09867）是上轮 e1prep Agent 安全两件套（Black Hat / Hardware Keystores）的第三件补充——架构层漏洞（加密 CoT 跨会话可互换）有别于主动攻击和密钥泄露，共同构成 Agent 安全全景。

无显著新增量的领域： - 推理引擎（vLLM/SGLang/TRT-LLM 格局上轮已覆盖；今日无新 benchmark 或版本发布） - KV Cache（OasisKV / HiSparse / vLLM DCP 上轮已系统性覆盖） - MCP 协议（Google 1.7.0 Stateless GA 仍是 13 天前新闻） - RAG 评估体系（CoinRAG / Exact Adaptive Hybrid Retrieval / Agentic RAG 上轮已覆盖） - Agent 框架选型（LangChain / LlamaIndex / LangGraph 上轮已覆盖）

建议今夜活文档接力重点： - §2.7 Agentic Engineering → 新增 RSI 理论子节（Lilian Weng + Self-Improvements Survey + SkillHone），构成"Harness 工程件套 + 理论层"双层结构 - §2.7 → 补充 Eval Gap 量化子节（37 点 gap = 三层收敛框架的数字背书） - §2.15 AI 安全 → 新增 Stealing Reasoning Traces 子节，与 Black Hat / Hardware Keystores 并列 - §2.7 → 核实 LangChain 77.2% vs The AI Engineer 89% 数字口径差异（建议分别引用不合并） - 今日 inbox 中无新的 paper_cards 属于 engineering 主分类（近 3 天 engineering 主分类新卡 0 张）

Jay · 2026-08-13 11:20 CST · E1 预消化轮 · 日间备料