rag · E1 预消化简报(2026-11-02)

作者：Tom · E1 日间预消化轮（rag） 时间：2026-11-02 08:50 CST 增量来源：宿主机增量清单 organized/indexes/work-guard/a226d618-fe37-4db7-8abc-71fb9c344c0e.json（items 1 项、materials 8 份全部读取；target=inbox/tom/2026-11-02-rag-e1prep.md） 基线：organized/knowledge/rag.md（R128，1199 行，末次更新 2026-10-25 13:55）＋ 已存在未发布的 organized/knowledge/.rag-candidate.md（R129 草稿，2026-10-30 14:19，二者合并作为去重基线） 本轮未做：未做全库扫描、未用网页检索补料、未为凑字数多轮重写、未改活文档 / 清单 / 基线 / 认领记录 / 定时配置、未写他人目录、未 git、未输出密钥。

0. 一句话判断

本轮 RAG 主分类 arXiv 净增 = 0。清单 8 份材料里没有一篇是 RAG 方法论文——5 张 paper_card 全部带 主题: rag 标签，但主分类分别是 llm-infra / engineering / engineering / engineering / multimodal，其中 1110.3193 干脆是 ESA 的暗能量巡天任务定义报告（astro-ph），是最严重的一次错标；论文侧净增 0。真正有内容的是仓库侧：ttoss/soat 首次进入本库知识文档视野（8 月已采集但从未消化），mahmoudrabie/agentic-ai 首次采集即入库，后者还顺手暴露了 rag 域评测基座缺口——rag.md 全文 1199 行里 MS MARCO / nDCG / MRR 一次都没出现（0 命中），而本批的 1611.09268 正是这套基座的源头。

1. 今日增量（3 条实质 + 1 条登记级）

增量 ① ★★ ttoss/soat —— 把"检索 + 记忆 + 护栏 + 审批 + 版本 + 评测"做成一个可自托管平台（仓库）

  • 来源：organized/repo_cards/2102-ttoss-soat.md（清单材料 repo_cards:2102-ttoss-soat）。卡面：9⭐、周增 +1、TypeScript、Apache-2.0、主分类: agent、形态: framework、成熟度: experimental、首次采集 2026-08-16、上次采集 2026-11-02。README 原文（https://raw.githubusercontent.com/ttoss/soat/main/README.md）已读，关键句为："One self-hostable Node.js server gives you IAM, file and document storage with vector search, multimodal ingestion, conversational memory, agent orchestration, DAG-based multi-agent workflows, retrieval-augmented generation, guardrails and human approvals, usage metering and quotas, versioned agents with canary rollout, declarative stack deployment, a built-in web console, and a full Model Context Protocol server with first-party OAuth — backed by PostgreSQL."
  • 要点：卡面简介只写了一句"为自主 AI Agent 提供持久记忆能力"，严重低估。README 实际覆盖四层 agent 架构——harness（能触达什么 / 被禁止什么）、loop（用什么证明这次运行把活干完了）、graph（下一步允许发生什么）、ratchet（用什么证明这次改动是改进）。其中 ratchet = 变更治理是本库此前没有记录过的形态：append-only 的 agent 版本历史 + 一键回滚、确定性 stable/canary 切分、每次生成打上服务版本戳、datasets + 确定性/LLM-judge scorers + scored runs 对 baseline 出 pass/fail 判决、canary 必须拿到针对它自己的通过评测才能晋级（"promotion is never automatic"）、审批队列带 recurrence view（把重复的人工纠正暴露出来，避免每次手工打补丁）。护栏侧是"按每次工具调用的真实参数做确定性分类，危险动作进人工审批队列并冻结证据、硬过期"。对外暴露面是 REST / MCP / CLI / TypeScript SDK 四个等价接口，MCP 侧自带 first-party OAuth 2.1 授权服务器（Claude Desktop / Cursor / VS Code 走标准 authorize + PKCE）。
  • 与 rag.md 现有脉络的关系：三处咬合，且都指向"rag.md 尚未记录的位置"。① 共识 236（Agent 长周期记忆基础设施协议化 / 本地化）此前收录的是记忆层单点（mcp-memory-service / shinpr-mcp-local-rag / kordoc / mneme / xerj / cortexkit-aft）；soat 把这条路从"记忆一层"扩成"全套 agent 平台一层"，并用 PostgreSQL + pgvector 把"本地优先"坐实——这是共识 236 的形态升档，不是反证。② 争议 198（MCP 协议化 vs 私有协议）此前只有三种坐标（审计契约 / 企业平台 / 外挂协议）；soat 给出了第四种最激进的形态：协议方自己同时是实现方与授权方（MCP server + OAuth 授权服务器同体），这把 198 的问法再推一格——争议可能不是"协议 vs 私有"，而是"谁同时持有协议与凭据"。③ 开放 284（逐文档授权 vs 复合结论级授权）与 285（轨迹数据 / verify 自动判据）在 soat 里有工程侧对应物：护栏是"工具调用级"的确定性分类 + 审批冻结证据，评测侧是"运行级"的可复核判决——两者都停在单次调用 / 单次运行粒度，正好反衬 284 的复合结论粒度与 285 的轨迹粒度都还没有工程答案。
  • 建议归入：§3.1 共识 236 补一条形态升档（"记忆基础设施"→"自托管 agent 平台"）；§3.2 争议 198 补第四坐标；§3.4 开放 284 / 285 各补一条工程侧相邻形态（并明写"粒度不匹配，不可当答案"）；§2.1 新增「平台 / 框架」子类。
  • 警惕：⚠️ 9⭐、周增 +1、forks 2、watchers 0、open issues 12，GitHub API 显示仓库 2025-12-27 才创建、总星数个位数——这是证据强度最弱的一条，只能作形态样本，不能进任何共识。⚠️ 卡片 形态: framework / 分类: skill 与 README 实际形态（平台 + 框架 + 协议实现）不完全对应。⚠️ README 里的所有能力均为自述，无第三方评测、无生产案例；本文引用的句子是原文，不作效果背书。

增量 ② ★ mahmoudrabie/agentic-ai —— 一张跨 24 领域的 agentic AI 策展索引（仓库 / 导航层）

  • 来源：organized/repo_cards/4806-mahmoudrabie-agentic-ai.md（清单材料 repo_cards:4806-mahmoudrabie-agentic-ai）。卡面：188⭐、周增 +0、MIT、主分类: agent、形态: benchmark、分类: ai、首次采集 2026-11-02。GitHub API：created 2025-03-21、pushed 2026-11-01、forks 7、watchers 1。
  • 要点：README 自述"300+ curated agentic AI papers, benchmarks, frameworks, and real-world systems across 24 domains"，域名索引给出分区计数：Research 67 / Framework 66 / Security 55 / Testing 27 / Reasoning 26 / Healthcare 16 / Software Engineering 16 / Automation 15 …（余 17 个分区 1–9 篇不等）；另有"按公司与机构统计"的作者归属表。它是索引 / 策展层（collection），不是 benchmark，也不提供任何实验结论。
  • 与 rag.md 现有脉络的关系：rag.md §2.1 的 A 组三件（literature-review-assistant / llm-wiki / CiteProof-AI-MCP）被归为"证据层工具"；本件是策展 / 导航层，层级不同但方向一致——都是"把散落的论文与工具收进可核查索引"。它对本库的实际价值是选材池：其 Framework 分区（66 篇）里 memory / retrieval / context 相关的条目中，有多篇的 arXiv 号在 rag.md 与 .rag-candidate.md 中均 0 命中，例如 2602.19320（Anatomy of Agentic Memory：记忆评测与系统局限的分类学与实证分析）、2602.16313（Benchmarking Agent Memory in Interdependent Multi-Session Agentic Tasks）、2605.13941（EvolveMem）、2603.23234（MEMCOLLAB）、2502.12110（A-MEM）、2610.19366（多模态 agent 记忆的演进）、2603.06713（Scaling Agentic Capabilities, Not Context）、2508.14704（MCP-Universe）、以及已经在 rag.md 主轴上的 2604.24594（Skill-RAG）与 2607.01224。这批"记忆评测 / 多会话 / 跨域难度"主题与 开放 285 ③（跨领域难度是否可比） 直接相关——但这些条目本轮只作为线索登记，它们没有对应 paper_card，不在本批材料内，不得当作已核实增量。
  • 建议归入：§2.1 新增「策展 / 导航层」子类（与 A 组"证据层工具"并列但分属两层）；§3.4 开放 285 ③ 补一列候选文献编号线索（明示未核实）。
  • 警惕：⚠️ 卡片 形态: benchmark 明显不准，实为 index / collection，应为分类元数据缺陷。⚠️ 卡片 主题 含 rag / evaluation / risk / llm-infra，但 README 通篇没有系统级 RAG 综述，主要是 agent memory / 编排 / 评测。⚠️ 其表格以 LinkedIn 帖为次级链接、arXiv 为主要链接，收录标准由作者自定，不构成质量背书；README 明确写了"curation standard 正在向 GitHub-native canonical links 迁移"，说明条目仍在变动。

增量 ③ ★ 2604.17227 —— LLM 云原生与分布式系统研究议程（弱邻接，非 RAG 方法增量）

  • 来源：organized/paper_cards/140-2604-17227.md（清单材料 paper_cards:2604.17227）。卡面：主分类: llm-infra、形态: survey、S2 被引 4 / OpenAlex 0、DOI 10.48550/arxiv.2604.17227、来源文件 inbox/jay/2026-06-10-database-cloudnative-backend.md + S2 enrich + OpenAlex backfill。arXiv API 核验：标题 Cloud-native and Distributed Systems for Efficient and Scalable Large Language Models -- A Research Agenda，cs.DC，2026-04-19 提交，comment "51 pages, 5 figures"，作者含 Minxian Xu、Jingfeng Wu、Shengye Song、Satish Narayana Srirama、Mahmoud Javad（摘要口径：传统云基础设施不足以支撑 LLM 规模，需要转向 LLM-aware、跨层、自适应系统；讨论 serverless inference、量子计算、联邦学习、混合云边）。
  • 要点与关系：它不是 RAG 论文，只在"检索 / 推理服务的承载基础设施"这一层与 rag 域邻接。rag.md §3.3 开放 281 记的是长上下文 vs 检索边界的成本侧（遗忘衰减、prefill 排队冻结）；本件提供的是同一成本问题的供给侧议程——检索/推理服务如何被 autoscaling、微服务、混合云边所承载。可作为 281 的"工程供给侧"背景登记，不进 SOTA 主轴。
  • 建议归入：§3.3 开放 281 补一句"供给侧议程参照（弱）"；§2.1 D 组（分类体系错位命中）新增 1 件登记。
  • 警惕：⚠️ 全库层面并非首次：2604.17227 已在 organized/knowledge/llm-infra.md、llm-application.md 与 archive/database-20260707-full.md 登记（后者记为"45 页研究议程"，而 arXiv comment 写的是 51 pages——页数口径不一致，待核）。⚠️ 本卡片的 可复用信息 块被污染：内容是同一份 Jay 笔记里 1️⃣1️⃣ Inline.ai · Kubernetes 迁移指南（KubeVirt / FinOps / GatewayAPI）的条目，与本篇无关，不予采信（见 §2 缺陷 A）。

增量 ④（登记级）★ 1611.09268 MS MARCO —— 检索评测基座的源头，rag 域此前从未登记

  • 来源：organized/paper_cards/1817-1611-09268.md（清单材料 paper_cards:1611.09268）。卡面：主分类: engineering、形态: method、S2 被引 3764 / OpenAlex 1190 / 影响力 641、主题: rag（标签错位）、DOI 10.48550/arxiv.1611.09268、来源 [OpenAlex discover] + [S2 enrich]。arXiv API 核验标题与摘要一致：MS MARCO: A Human Generated MAchine Reading COmprehension Dataset。
  • 要点（摘要级）：1,010,916 条取自 Bing 查询日志的匿名问题，每条配一个人工答案 + 182,669 条完全人工重写的答案；语料为 8,841,823 个 passage，抽取自 3,563,535 个 Bing 检索到的网页；定义三个难度递增的任务——① 给定 context passages 判断问题可答性并像人一样抽取与综合答案；② 在可能时生成良构答案；③ 排序。问题可有多答案或无答案。
  • 与 rag.md 现有脉络的关系：这是本轮唯一一条把 rag 域评测基座接回来的材料。rag.md 从 R82 累积到 R128、1199 行正文，"MS MARCO""nDCG""MRR"全部 0 命中——而 R128 恰恰把"评测批判成建制"写成趋势 343 的主线（2610.26260 重排器候选池 / 2610.28054 用户仿真器 / 2610.27850 联合评估鲁棒性 / 2610.30418 Agent Mosaic），并把开放 285 定位在"轨迹数据的 verify 判据"。批评评测装置的那条线，本轮首次有了它所批评的那个经典基座的出处。这也解释了为什么上上轮 2610.40454 Glance 的评述里反复出现"MS MARCO 上微调 39 分钟达到 nDCG 水平"——那正是这条缺口的实例：rag.md 记录了"用 MS MARCO 报 nDCG"的结论，却没有记录 MS MARCO 本身与它的任务定义。
  • 建议归入：§3.5 趋势 343 补一句"评测批判的对象谱系需要补齐基座（MS MARCO 为起点）"；§4 SOTA 综述不进主轴（2016 年数据集，非当代方法），但可作为"重排 / 检索评测"一节的溯源脚注；§5 参考清单新增该 arXiv 号与 DOI。
  • 警惕：⚠️ 这是 2016 年的数据集，属"历史锚点 / 复访"，不是今日新发现，写的时候必须标明年份。⚠️ 它与 2604.17227、1110.3193、2205.01068、2303.08774 同批同源于 [OpenAlex discover] 派发（见 §2 缺陷 B），因此它进入 rag 域是派发机制的结果，需要主动判断是否保留。⚠️ 摘要只给数据集规模与三个任务的定义，未给 nDCG/MRR 基线数值，不能拿它当"检索质量"的数字来源。

2. 矛盾与待核实

缺陷 A（可核查、影响本批材料）— paper_card 的 可复用信息 块存在稳定的"取自上一条目"错位。 本轮 3 例可复现，3/3 命中同一规则： 1. organized/paper_cards/140-2604-17227.md（Jay 笔记 1️⃣2️⃣ arXiv 条目）的可复用信息块写的是同笔记 1️⃣1️⃣ Inline.ai · Kubernetes 迁移指南（KubeVirt / 自动化 FinOps / GatewayAPI / "工程实践参考，非学术"）； 2. organized/paper_cards/017-2606-06036.md（笔记 4.2 MRAgent）的块写的是 4.1 MAGE 的方法要点（Grow / Compress / Maintain / Revise、MemoryArena +7.8–20.4pp、token 降 55.1%）； 3. organized/paper_cards/015-2606-01240.md（笔记 4.5 InSemRAG）的块写的是 4.4 OpenComputer 的内容（33 个桌面应用 / 1000 个 finalized tasks / GPT-5.4 68.3%）。 规律是块取自同一份来源笔记的上一条目，不是随机污染。这与 organized/knowledge/engineering.md v157 已登记的"card 104 的可复用信息块实为 TOKI"属同类缺陷、但本轮把规律显性化为"上一条目"。处置建议：这些块一律不得作为方法学证据；今晚消化时若引用 2604.17227，只用其 TLDR 与 arXiv 摘要。

缺陷 B（系统性）— 主题: rag 标签派发与卡片 主分类 系统性错位。 本批 5 张 paper_card 的 主题 全含 rag，主分类却分别是 llm-infra / engineering / engineering / engineering / multimodal，其中 1110.3193 是 astro-ph 的宇宙学任务报告（Euclid Definition Study Report，ESA Cosmic Vision 2015–2025 暗能量巡天，1.2 m Korsch 望远镜 + VIS/NISP，宽巡天 15,000 deg²，测光红移精度 dz/(1+z)<0.05、BAO 谱红移 0.001）。结论：上游按 主题: rag 筛选必然把非 RAG 论文派进 rag 轮；1110.3193 应登记为分类噪声（其内容与 RAG 零关系，且库内已有 organized/promo/explainers/1110-3193.md 正确按 ESA 天文任务撰写，说明下游识别正确、只是上游派发错）。

待核实 C — xerj 星数与"周增"口径不稳定。 organized/repo_cards/4393-xerj-org-xerj.md 记 18621⭐、周增 +4529；GitHub API 当前实测 18669⭐（forks 1422、watchers 195、open issues 98，created 2026-06-30）。历史记录中的"周增"彼此不自洽：R123 +2639、R126 +1829、R129 草稿 +567、本轮 +4529；而绝对星数单调递增且与 API 对得上（R120 4568 → R123 7957 → R126 12498 → R129 17602 → 现在 18621）。处置：以绝对星数为唯一可信口径，"周增"字段暂不采信。另注：仓库 created 2026-06-30 而 stars 已近 1.9 万，且 organized/guides/xerj-org-xerj.md 已存在（说明早已深入整理），本轮第三次入清单、无新观点，仅作共识 236 的既有共识强化证据。

待核实 D — 2604.17227 页数口径。 库内 archive/database-20260707-full.md 记"45 页研究议程"，arXiv comment 记 "51 pages, 5 figures"。以 arXiv 为准，库内记录待更正。

已核对并排除的疑似错误。 曾怀疑 rag.md 把 MAGE 与 2606.07001 并列；经 arXiv API 逐条核验：2606.06090 = Beyond Semantic Organization: Memory as Execution State Management for Long-Horizon Agents（MAGE，正确），2606.07001 = DataEvolver: Automatic Data Preparation for LLM through Multi-Level Self-Evolving（engineering 域 card 104），2603.15031 = Attention Residuals。rag.md 第 143 行的 "R121 续立" 与第 1197 行 R126 的 "2606.06090 MAGE" 各自正确，无错标，此前怀疑不成立。

3. 不计入本批增量的 4 份材料（附理由）

材料 理由
paper_cards/1818-2205-01068（OPT） 主分类: engineering，主题: rag 错标。OPT（125M–175B decoder-only）已在 organized/knowledge/engineering.md 登记，属历史重遇，无 RAG 方法内容。
paper_cards/1815-2303-08774（GPT-4 Technical Report） 主分类: multimodal，已在 engineering.md / llm-application.md 登记；技术报告本身无 RAG 方法贡献。
paper_cards/1824-1110-3193（Euclid） ESA 宇宙学任务报告，与 RAG 零关系，登记为分类噪声（缺陷 B）。
repo_cards/4393-xerj-org-xerj 第三次入清单，卡面描述与 R129 草稿逐项一致，仅星数/周增变化 → 按"采集时间与被引变化不算新观点"，只作共识 236 强化证据。

4. 交叉线索（近 2 天 inbox / 近 3 天 paper_cards 抽查，均不计入本批增量）

  • 近 2 天 inbox（jay / tom / flyp / spark / stephen 全目录，元数据级扫描 + 定向阅读）：与 rag 直接相关的高价值材料集中在 inbox/tom/2026-11-01T0840-agent-rag-longcontext-radar.md（Glance 2610.40454 / MLLM 检索头 2610.32411 / Youtu-Parsing-Omni 2610.39301 / Investor's Last Exam 2610.38342）与 inbox/tom/2026-11-02-0900-hf-daily-2026-11-02.md。这些已被 10-31 轮的 inbox/tom/2026-10-31-rag-e1prep.md 消化，今晚不得重复计入。inbox/jay/2026-11-02T0820-csdn-discovery.md 今日 8 条线索为 pyproject / 私有化部署 / Claude Code 安装 / 电梯故障排查等，无 rag 相关内容。
  • 近 3 天 主分类: rag paper_cards 抽查：438-2312-10997（Retrieval-Augmented Generation for LLMs: A Survey，Gaoyuan 等，rag.md 已 4 次命中，本轮无新意）、843-2608-07458（CoinRAG，10-31 轮已作本轮主增量）、076-2604-16548（A Memory Lifecycle Framework，六阶段 Write/Store/Retrieve/Execute/Share/Forget + 四安全目标，engineering.md v157 已作为"重遇"登记）、850-1406-5679（Deep Fragment Embeddings，2014 年多模态双向检索，属历史项）、035-2604-01395（On-Premises RAG blueprint）、712-2608-02583（UEmbed 稀疏+稠密统一嵌入）。均超出本清单材料边界，只作今晚候选线索，未核实即不入库。
  • 库内小不一致（低优先）：organized/knowledge/rag.md 第 143 行的 "R121 续立" 列表含 2606.07001（DataEvolver，数据准备方向）而该卡主分类为 engineering；对照 2.4 D 组既有先例（错位命中登记为分类噪声、不进主轴），此处处理方式一致，无需更正。

5. 可引用的 arXiv 号

本批材料涉及的 5 个号（全部为 rag 域首次出现，其中仅 1611.09268 具备 RAG 关联）： 2604.17227（LLM 云原生研究议程 · 弱邻接）· 1611.09268（MS MARCO · 评测基座锚点）· 1110.3193（Euclid · 错标噪声）· 2205.01068（OPT · 历史重遇）· 2303.08774（GPT-4 · 历史重遇）

§4 交叉线索（未核实，不得引用为已核实证据）：2606.01240、2606.06036、2604.16548、2604.01395、2608.02583、2606.06090、2312.10997、1406.5679

增量 ② 中由 agentic-ai 的 Framework 分区给出的选材线索（仅索引层，标题取自其 README 表格，未逐篇核）：2602.19320、2602.16313、2605.13941、2603.23234、2502.12110、2610.19366、2603.06713、2508.14704、2604.24594、2607.01224

已在本轮 arXiv API 核验过标题的号：2604.17227、1110.3193、2205.01068、1611.09268、2303.08774、2606.06090、2606.06036、2606.07001、2603.15031、2604.24594、2610.19366、2508.14704、2603.06713

6. 检查过的来源清单

  1. 清单：organized/indexes/work-guard/a226d618-fe37-4db7-8abc-71fb9c344c0e.json（items 1、materials 8，target=inbox/tom/2026-11-02-rag-e1prep.md）；同目录历史 manifest（359f400c…、5fe98fd2…、a3ac62be…）仅用于确认 xerj 的重复派发次数。
  2. 清单 8 份材料全文：organized/paper_cards/140-2604-17227.md、1824-1110-3193.md、1818-2205-01068.md、1817-1611-09268.md、1815-2303-08774.md、organized/repo_cards/4393-xerj-org-xerj.md、2102-ttoss-soat.md、4806-mahmoudrabie-agentic-ai.md。
  3. 基线与上下文：organized/knowledge/rag.md（全文 + ID Archive）、organized/knowledge/.rag-candidate.md、organized/queue/work-queue.md（2026-11-02 08:00；rag 域已 7 天未更新）、organized/knowledge/engineering.md（v157 采集缺陷记录）、inbox/tom/2026-10-31-rag-e1prep.md（上轮口径对齐）。
  4. 受限核验（仅限清单内材料的可核查读取）：arXiv 官方 API export.arxiv.org/api/query 核验 5 个本批 ID ＋ 8 个对照 ID；GitHub API 核验 soat / agentic-ai / xerj 三仓的 stars / forks / created / pushed；raw.githubusercontent.com 读取 soat README 与 agentic-ai 的 README.md / README-framework.md；organized/promo/explainers/1110-3193.md、organized/guides/xerj-org-xerj.md 存在性核对。
  5. 元数据级交叉：organized/indexes/classify-meta.jsonl（含"近 3 天 主分类: rag"筛选与 5 个本批 ID 的主分类核对）、organized/indexes/embeddings-meta.jsonl、metadata/fetch_audit.jsonl（soat 的 created 2026-08-16 / updated 2026-11-02）、inbox/{jay,tom,flyp,spark,stephen} 近 2 天文件的 rag 相关性扫描。

未触碰：organized/knowledge/rag.md、.rag-candidate.md、清单文件、work-guard state、认领记录、其他任务文件、定时配置、他人目录；未执行 git；未输出任何密钥或凭据。