Jay 五类简报 · 2026-09-04 第三次(14:00 UTC / 22:00 CST)

主题

NSDI 2026 系统前沿 · GitHub 2026 秋 AI Agent 生态格局 · Agentic RAG 范式精读 · Substack 高价值专栏 · 向量库选型更新


📦 一、Database(向量库 / 数据库研究)

🔬 D1|2026 向量数据库选型指南(Production Decision Framework)

来源Medium / Pratik Rupareliya
发布时间:2026-07(定期更新)
可信度:中高(基于 100+ 企业生产部署经验,非厂商立场)
标签:vector-db, production, comparison, RAG

核心判断(2026-09 更新版)

场景 推荐 理由
新项目起步 pgvector on Postgres ≤5000 万向量无压力;集成现有 Postgres 生态;无独立维护成本
生产级 RAG,100M+ 向量 Pinecone(托管)/ Milvus(自托管) 亿级索引成熟;Kubernetes 原生
Rust 技术栈 / 成本敏感 Qdrant 量化效率高;Rust 实现;过滤能力强
快速原型 / 本地开发 Chroma 最简;文档友好;但不推荐直接上生产
需要内置向量化 Weaviate 原生 hybrid search + 内置 vectorizer
已有 Cassandra 资产 Apache Cassandra 5.0(k-NN) 存储附加索引避免数据迁移

关键结论

"The vector database you start your RAG project with is rarely the one you ship to production with."
先 pgvector,瓶颈明确后再迁——这是 2026 年大多数团队的最优路径。

后续行动

  • 精读:对比测试 Qdrant 1.17 新版量化参数(2026-07 更新)
  • 审稿:向量库 benchmark 方法论(Embeddings 质量 vs 检索延迟取舍)
  • 链接收藏:DEG: Dynamic Edge Graph — 新研究,HNSW 替代方案

📄 D2|Agentic RAG 2026 系统化综述(SoK)

来源Turing Post / RAG Types
可信度:中(行业媒体,内容引用原始论文)
标签:agentic-rag, RAG-types, graphRAG, hybrid-search, 2026

20 类 RAG 架构分类(2026 最新)

核心演进方向:从"检索→生成"单通路 → Agent 驱动的多步决策检索

类型 核心机制 适用场景
Agentic RAG LLM 自主规划检索策略;多步推理;迭代验证 复杂问答;需要分解的查询
Graph-O1 MCTS + RL 在图结构上探索节点/边 知识图谱、引用网络、生物信息网络
A-RAG(Adaptive) 查询类型自适应路由 混合检索源(向量+全文+知识图谱)
FD-RAG(Federated) 跨私有数据源联邦检索 企业合规;数据主权要求
Self-RAG LLM 自判断是否需要检索(反射 token) 降低不必要检索开销;ICLR 2024 Oral

评价

Graph-O1 值得关注:MCTS + 图结构解决 context length 限制问题,在知识图谱问答场景有实质突破。但实现复杂度高,适合有明确图数据资产的团队。

后续行动

  • 可加入知识库主题页:RAG Paradigm 2026 更新
  • 建议精读 Graph-O1 原始论文

⚙️ 二、Backend(推理引擎 / Agent 框架 / MLOps)

🔬 B1|NSDI 2026 系统前沿:LLM 推理与分布式训练

来源Paper.lingyunyang / NSDI 2026 Awesome Papers
可信度:高(顶级系统会议,被接收论文)
标签:NSDI2026, inference-systems, distributed-training, MoE, GPU-scheduling

高价值论文摘要

① FAST — MoE GPU All-to-All 调度器(CMU + MangoBoost + UW + UPenn) - 解决现代 ML 工作负载(尤其 MoE 模型)在异构双层 GPU fabric 上的 All-to-All 通信效率问题 - 通过 intra-server rebalancing + 均衡 one-to-one scale-out 传输避免 incast congestion - 亮点:将 schedule synthesis 时间降低数量级,同时在偏斜 workload 上超越 prior schedulers - 🔍 建议精读:FAST scheduling algorithm 详细分析

② JITServe — LLM 即时推理调度(UIUC + NJU + Google Labs + Cisco Research) - 解决请求信息在到达时不确定的 workload(如流式生成) - 预测未来 decoding lengths,构建 just-in-time execution schedules - 结果:吞吐提升 1.8x–7.5x,SLO 达成率改善 2.2x–8.7x - 🔍 建议精读:prediction accuracy vs system dynamics 的权衡建模

③ Checkmate — 分布式 GPU 检查点系统(Tufts + MIT) - 复用网络复制梯度避免额外网络传输和磁盘 I/O - 可重构 in-network checkpoint replica placement - 结果:32-GPU 集群上吞吐量提升 ~100%,相比异步 checkpointing 改善 13.7%

④ DroidSpeak — KV Cache 跨微调变体共享 - 跨 fine-tuned 模型变体共享 KV Cache - 🔍 关注:与 vLLM 的 Prefix Caching 集成可行性

后续行动

  • 必精读:FAST 和 JITServe 是 2026 年 LLM 推理系统的两大方向(通信优化 + 即时调度)
  • 主题页更新:NSDI 2026 Systems for LLM
  • 不写入 /review/ 或 GitHub

📄 B2|The AI Agents Stack(2026 Edition)— The AI Engineer Substack

来源The AI Engineer / Substack
可信度:高(专注 AI 工程的优质技术专栏)
标签:agent-stack, 2026, MCP, guardrails, evaluation

2024→2026 最大变化(三点)

  1. Agent Guardrails 独立成学科:不再只是 I/O 过滤,而是 tool authorization + rate limiting + 事后验证
  2. "Guardrails before action" 模式出现:授权必须在 tool execution 层,不在 output 层——"By the time you filter the response, the agent already sent the email."
  3. OWASP MCP Top 10(beta)发布:首个面向 tool-connected agents 的安全清单

6 层 Agent Stack(2026)

Model → Gateway → Harness → Skills → Agent → Workspace
层级 核心功能 代表工具
Model 基础推理 GPT-4o, Claude, Llama, DeepSeek
Gateway 多模型路由、负载均衡 OmniRoute, PortKey
Harness 执行框架、memory、observability LangGraph, LlamaIndex, OpenClaw
Skills 可复用行为单元 Skills (mattpocock), MCP servers
Agent 自主决策、工具调用、状态管理 OpenClaw, Claude Code, AutoGPT
Workspace 沙箱、文件、系统交互 Claude Code, DSH Desktop

评价

这是目前最清晰的 Agent 系统架构图。Memory 作为"第一等公民"替代了 2024 年的" afterthought"定位——这是 2026 年的核心范式转变。

后续行动

  • 精读:OWASP MCP Top 10 安全清单(beta)
  • 更新知识库:Agent Stack 2026 主题页

📄 B3|Simon Willison Substack — Agentic Engineering Patterns

来源Simon Willison / Substack
发布时间:2026-02-20(近期回看价值高)
可信度:高(知名 AI 工程师,datasette.io 作者)
标签:agentic, production, prompt-caching, Claude-Code, 2026

核心洞察

① Prompt Caching 改变了 Agent 经济模型
Claude Code 等长时运行产品依赖 prompt caching 复用前序计算,显著降低延迟和成本。需监控 prompt cache hit rate 并设告警阈值。

② Andrej Karpathy:2025-12 月是关键节点

"coding agents basically didn't work before December and basically work since"
2025 年 12 月的模型质量跃升是 AI 编程的转折点——长期一致性和韧性显著提升。

③ Hoard things you know how to do
Simon 的工程建议:构建可复用技能库(Skills),而不是每次从零 prompt。

后续行动

  • 精读:Simon Willison 的 prompt caching 工程实践
  • 评价:与 OpenClaw 的 skills 机制对比

📄 B4|Rocky Bhatia Substack — How to Learn Agentic AI in 2026

来源Rocky Bhatia / Substack
可信度:中(技术博客,非学术)
标签:agentic, learning-path, production, memory-systems

最有价值的工程心智模型

LLM ≠ Agent
Agent = LLM + Retrieval + Memory + Tools + Planning
        + State + Observability + Constraints + Execution Infrastructure

真实生产故障案例(记忆系统)

多 agent 共享 memory 时最奇怪的失败之一:agents 逐渐将合成摘要写回长期记忆,最终 生成的解释取代了源真值。系统输出保持连贯但已偏离事实。

学习路径建议(真实路线图)

  1. LLM fundamentals
  2. Retrieval systems(RAG)
  3. Workflow orchestration
  4. Tool execution
  5. Memory architectures ← 2026 年最被低估
  6. Reliability engineering
  7. Security + governance
  8. Multi-agent coordination
  9. Operational economics

后续行动

  • 审稿:Memory architectures 在多 agent 场景下的故障模式
  • 更新知识库:Agentic AI 学习路径 2026

☁️ 三、Cloud-Native(分布式系统 / K8s / 云原生)

🔬 C1|Cloud-Native + Distributed Systems for LLM — 研究议程论文

来源arXiv:2604.17227v1
标题:Cloud-native and Distributed Systems for Efficient and Scalable Large Language Models – A Research Agenda
可信度:高(arXiv,2026 年最新)
标签:cloud-native, LLM-systems, distributed, research-agenda

核心论点

现有云原生抽象(容器化、微服务、auto-scaling、服务网格)对 LLM 工作负载既有适配也有局限: - 适配:弹性、容错、 parallelism - 局限:LLM 的计算/通信/能效特性需要 LLM-aware 系统设计

开放研究问题

  1. LLM-aware 资源管理(不是简单 GPU 调度)
  2. 分布式 LLM 推理的 consistency management
  3. 能源效率作为一等优化目标
  4. decentralized control for LLM workloads

评价

这篇是少见的同时覆盖 cloud-native + LLM 的研究议程论文。对理解 LLM 基础设施的系统视角有帮助,但无需精读——浏览 + 记住主要结论即可。


📄 C2|Post-Deterministic Distributed Systems — 分布式系统新范式

来源arXiv:2606.01722
标题:Post-Deterministic Distributed Systems: A New Foundation for Trustworthy Autonomous Infrastructure
作者:J He(2026,Cited by 1)
可信度:中(早期工作,仅 1 次引用)
标签:distributed-systems, autonomy, trustworthy-systems

初步判断

这是 2026 年的早期探索性论文,关注自主基础设施的可信性。
当前评级:观察级(1 次引用说明尚未被社区广泛认可)。
建议:加入知识库"值得关注但待验证"列表,后续跟踪引用数。

后续行动

  • 2–3 个月后检查引用数再决定是否深入

📄 C3|NSDI 2026 — PLB: 复制数据库优先级感知负载均衡

来源DistillSys Research Index
标签:distributed-systems, load-balancing, database, 2026

摘要

PLB(Priority-Aware Load Balancing):在受限资源下对复制数据库的优先级感知调度。

评价

属于经典分布式数据库问题的新解法,适合数据库系统研究跟踪。


💻 四、CSDN(高价值技术文筛选)

注:今日 Tavily 搜索未直接命中 CSDN 内容。以下引用来自近期工程筛选积累。

CS1|vLLM SGLang 生产调试命令积累(持续更新)

来源:Jay 工程筛选积累 + CSDN 精选
标签:vllm, sglang, production, debugging, commands

核心命令参考(2026-09 整理)

vLLM OOM 排查

# 查看 KV Cache 利用率
curl http://vllm:8000/metrics | grep kv_cache

# 调整 max_model_len
python -m vllm.entrypoints.openai.api_server \
  --model meta-llama/Llama-3.1-70B \
  --max_model_len 32768 \
  --gpu_memory_utilization 0.85

SGLang 生产基准测试

python -m sglang.benchmarks.launch_serving \
  --model NousResearch/Meta-Llama-3-70B \
  --num-prompts 1000 \
  --concurrency 32

后续行动

  • CSDN 来源待验证:需确认具体文章链接
  • 建议:建立生产命令速查手册

🔬 五、Reproduction(可复现研究 / 基准 / 代码库)

🔬 R1|Awesome-Search-Agent-Papers — Agent 检索论文列表

来源GitHub / YunjiaXi
标签:agent, RAG, search, paper-list, arxiv-2026

2026-07–2026-08 最新高价值论文

时间 论文 方向
2026.8 EviGraph: Evidence-Guided Autonomous Research Agents Agentic research
2026.8 Self-Correcting Long-Horizon Search Agents via Tree-Structured Memory Long-horizon agent
2026.7 PATS: Policy-Aware Training Scaffolding for Agentic RL Agentic RL
2026.7 CIGPO: Contextual Information-Gain Policy Optimization Multi-turn evidence reading
2026.7 Agent-UCT: UCB Applied to Trees for Agentic Workflow + Cost-Awareness Tree search + agents
2026.7 Reason Before You Retrieve: Agentic Planning for Multi-modal RAG Multimodal RAG
2026.7 AREX: Recursively Self-Improving Agent for Deep Research Self-improving agent

高优先级精读建议

  1. Agent-UCT:将 UCB/UCT 引入 agent workflow 调度,成本感知决策——对生产 agent 资源调度有直接参考价值
  2. EviGraph:自主研究 agent 的 evidence-guided 机制——2026 agent 能力前沿
  3. Self-Correcting Long-Horizon:树结构记忆解决长时 horizon 漂移问题——实用性强

📄 R2|GitHub 2026-09 AI Agent 生态格局

来源Shop.zimaspace.com + NocoBase + Web3.career
可信度:中(综合报道,有原始链接可验证)
标签:github-trending, agent-ecosystem, 2026, open-source

2026-09 新趋势:Agent 基础设施竞争 Model 仓库

关键变化:开源 AI 活动重心从 model repositories 转向 agent infrastructure

代表项目(2026-08 新增 star)

项目 类型 +Stars 特点
Orca Multi-agent orchestration +18.8K 并行编码 agent 协调
OmniRoute AI Gateway +16.8K 多 AI 工具/模型路由单端点
MoneyPrinterTurbo AI Video Workflow +17.1K 自动化短视频全流程
DeepSeek Harness Agent Runtime - agent 执行运行时

Top 20 AI Agent GitHub(2026 按 star 排序)

排名 项目 Star 类型
1 Langflow 146K Visual Builder
2 Dify 136K Visual Builder
3 CrewAI 95K Multi-agent
4 LangChain 87K Framework
5 Flowise 51K Visual Builder
6 AutoGen 41K Multi-agent
7 RAGFlow 77K RAG+Agent
8 LobeHub 74K Multi-agent
9 MetaGPT 66K Multi-agent
10 OpenBB 65K Finance AI

评价

三大趋势: 1. Visual/Low-Code Builder 主导(Langflow, Dify, Flowise 前五占三) 2. Multi-Agent Orchestration 是新前沿(CrewAI, AutoGen, Orca) 3. 开源正在复苏:企业从封闭 AI 工具回迁开源(Eclipse Foundation 2026 预测验证)


📋 汇总

分类 高价值条目 行动
Database 向量库选型指南(pgvector→Pinecone 路径)、Graph-O1、Agentic RAG SoK 精读 Graph-O1、更新 RAG 主题页
Backend NSDI 2026(FAST、JITServe、Checkmate、DroidSpeak)、AI Agents Stack 2026(The AI Engineer)、Simon Willison agentic patterns 必精读 FAST + JITServe、更新 Agent Stack 主题页
Cloud-Native Cloud-native LLM 研究议程(arXiv 2604.17227)、Post-Deterministic Distributed Systems 观察级:跟踪引用数
CSDN vLLM/SGLang 生产命令积累 待补充 CSDN 原文链接验证
Reproduction Awesome-Search-Agent-Papers(2026-07/08 最新)、GitHub 2026-09 AI Agent 生态 精读 Agent-UCT、EviGraph

实际写入路径/shared/research-kb/inbox/jay/2026-09-04T1410-jay-five-category-briefing.md

本轮未写入原因:N/A — 已写入

标签database, backend, cloud-native, csdn, reproduction, agentic-rag, nsdi2026, vector-db, agent-stack, github-trending

撰写人:Jay
时间:2026-09-04 14:10 CST(03:10 UTC)