Tom 文献雷达 · AI Agent / RAG / 长上下文 · 2026-07-11 下午版
主题: agent-rag-longcontext | 来源: arXiv + Hugging Face Daily | 时间: 2026-07-11 14:40 CST
📌 本期高价值(3 条)
1. Linear Attention Architectures: Mechanisms, Trade-offs, and Cross-Layer Routing
- arXiv: http://arxiv.org/abs/2607.07953v1 | 2026-07-08
- 核心问题: Softmax attention 在长上下文上二次成本太高,本文系统性对比 4 种线性注意力架构(DeltaNet、Gated DeltaNet、Kimi Delta Attention、Gated DeltaNet-2),用统一的"循环记忆"符号拆解各机制在表达能力、记忆衰减、读写控制、训练吞吐上的差异
- 实验: 350M 参数模型训练 15B tokens,发现循环线性注意力在长序列任务上显著优于 softmax,且训练效率更高
- 标签: #long-context #memory #systems
- 点评: 适合作为长上下文系统选型的工程参考——如果你的 Agent 需要在长轨迹上保持记忆,线性注意力是可落地的高效替代方案
2. Remember When It Matters: Proactive Memory Agent for Long-Horizon Agents
- arXiv: https://arxiv.org/abs/2607.08716 | 2026-07-08 | 本日早版已收录
- 核心: 独立 Memory Agent 并行运行,解决"behavioral state decay"(行为状态衰减);Terminal-Bench 2.0 pass@1 +8.3 pp,Claude Sonnet 4.5 在 Terminal-Bench 37.6% → 45.9%
- 标签: #agent #rag #long-context #memory
- 备注: 下午版再次推荐——这是当前 Agent Memory 方向落地可行性最高的方案之一
3. Token-Flow Firewall: Semantic Runtime Auditing for Persistent AI Agents
- arXiv: https://arxiv.org/abs/2607.08395 | 2026-07-09 | 本日早版已收录
- 核心: 将 Agent 安全威胁建模为 Token 流(记忆更新/工具参数/检索文件/组件通信),在语义层做运行时审计
- 标签: #agent #memory #systems
- 备注: 下午版再次推荐——Agent 规模化必须先解决安全问题,本文提供了可操作的框架视角
📋 全量候选(5 条,去重后)
| # | 标题 | 来源 | 日期 | 标签 |
|---|---|---|---|---|
| 1 | Linear Attention Architectures: Mechanisms, Trade-offs, and Cross-Layer Routing | arXiv | 07-08 | long-context / systems |
| 2 | Remember When It Matters: Proactive Memory Agent | arXiv | 07-08 | agent / rag / memory |
| 3 | Token-Flow Firewall: Semantic Runtime Auditing for Persistent AI Agents | arXiv | 07-09 | agent / memory / systems |
| 4 | The Context Access Divide: Interaction-Level Architecture as a Complementary Dimension of Agentic Inequality | arXiv | 07-09 | agent / rag / benchmark |
| 5 | Conversational RAG for Historical Penitentiary Records | arXiv | 07-09 | rag / systems |
注:HF Daily 的 LongE2V(视频扩散)、Canvas360(全景生成)、SAM-MT(多目标分割)本次标记为非核心条目,未纳入
🔭 Substack 线索
本期无新的强关联 Substack 线索,参考本日早版 Substack 条目(NextSignal Prediction · "OpenClaw is the Signal | 2026 Long-Horizon Agent Investment Map")
💡 趋势观察
- 线性注意力正从研究走向落地:DeltaNet/Gated DeltaNet 等架构已在 350M 模型验证,为 Agent 长记忆提供高效工程路径
- Memory Agent 独立化已成气候:Proactive Memory Agent 无需修改主 Agent 即可注入记忆,是当前最具工程可行性的长周期方案
- 安全框架开始涌现:Token-Flow 视角填补了"持久化 Agent 安全"的研究空白,值得持续跟踪
Tom 文献雷达 · 每日 3 次 · 轻量版 · 2026-07-11 下午