Jay 五类简报 · 2026-09-04 第三次(14:00 UTC / 22:00 CST)
主题
NSDI 2026 系统前沿 · GitHub 2026 秋 AI Agent 生态格局 · Agentic RAG 范式精读 · Substack 高价值专栏 · 向量库选型更新
📦 一、Database(向量库 / 数据库研究)
🔬 D1|2026 向量数据库选型指南(Production Decision Framework)
来源:Medium / Pratik Rupareliya
发布时间:2026-07(定期更新)
可信度:中高(基于 100+ 企业生产部署经验,非厂商立场)
标签:vector-db, production, comparison, RAG
核心判断(2026-09 更新版)
| 场景 | 推荐 | 理由 |
|---|---|---|
| 新项目起步 | pgvector on Postgres | ≤5000 万向量无压力;集成现有 Postgres 生态;无独立维护成本 |
| 生产级 RAG,100M+ 向量 | Pinecone(托管)/ Milvus(自托管) | 亿级索引成熟;Kubernetes 原生 |
| Rust 技术栈 / 成本敏感 | Qdrant | 量化效率高;Rust 实现;过滤能力强 |
| 快速原型 / 本地开发 | Chroma | 最简;文档友好;但不推荐直接上生产 |
| 需要内置向量化 | Weaviate | 原生 hybrid search + 内置 vectorizer |
| 已有 Cassandra 资产 | Apache Cassandra 5.0(k-NN) | 存储附加索引避免数据迁移 |
关键结论
"The vector database you start your RAG project with is rarely the one you ship to production with."
先 pgvector,瓶颈明确后再迁——这是 2026 年大多数团队的最优路径。
后续行动
- 精读:对比测试 Qdrant 1.17 新版量化参数(2026-07 更新)
- 审稿:向量库 benchmark 方法论(Embeddings 质量 vs 检索延迟取舍)
- 链接收藏:DEG: Dynamic Edge Graph — 新研究,HNSW 替代方案
📄 D2|Agentic RAG 2026 系统化综述(SoK)
来源:Turing Post / RAG Types
可信度:中(行业媒体,内容引用原始论文)
标签:agentic-rag, RAG-types, graphRAG, hybrid-search, 2026
20 类 RAG 架构分类(2026 最新)
核心演进方向:从"检索→生成"单通路 → Agent 驱动的多步决策检索
| 类型 | 核心机制 | 适用场景 |
|---|---|---|
| Agentic RAG | LLM 自主规划检索策略;多步推理;迭代验证 | 复杂问答;需要分解的查询 |
| Graph-O1 | MCTS + RL 在图结构上探索节点/边 | 知识图谱、引用网络、生物信息网络 |
| A-RAG(Adaptive) | 查询类型自适应路由 | 混合检索源(向量+全文+知识图谱) |
| FD-RAG(Federated) | 跨私有数据源联邦检索 | 企业合规;数据主权要求 |
| Self-RAG | LLM 自判断是否需要检索(反射 token) | 降低不必要检索开销;ICLR 2024 Oral |
评价
Graph-O1 值得关注:MCTS + 图结构解决 context length 限制问题,在知识图谱问答场景有实质突破。但实现复杂度高,适合有明确图数据资产的团队。
后续行动
- 可加入知识库主题页:RAG Paradigm 2026 更新
- 建议精读 Graph-O1 原始论文
⚙️ 二、Backend(推理引擎 / Agent 框架 / MLOps)
🔬 B1|NSDI 2026 系统前沿:LLM 推理与分布式训练
来源:Paper.lingyunyang / NSDI 2026 Awesome Papers
可信度:高(顶级系统会议,被接收论文)
标签:NSDI2026, inference-systems, distributed-training, MoE, GPU-scheduling
高价值论文摘要
① FAST — MoE GPU All-to-All 调度器(CMU + MangoBoost + UW + UPenn) - 解决现代 ML 工作负载(尤其 MoE 模型)在异构双层 GPU fabric 上的 All-to-All 通信效率问题 - 通过 intra-server rebalancing + 均衡 one-to-one scale-out 传输避免 incast congestion - 亮点:将 schedule synthesis 时间降低数量级,同时在偏斜 workload 上超越 prior schedulers - 🔍 建议精读:FAST scheduling algorithm 详细分析
② JITServe — LLM 即时推理调度(UIUC + NJU + Google Labs + Cisco Research) - 解决请求信息在到达时不确定的 workload(如流式生成) - 预测未来 decoding lengths,构建 just-in-time execution schedules - 结果:吞吐提升 1.8x–7.5x,SLO 达成率改善 2.2x–8.7x - 🔍 建议精读:prediction accuracy vs system dynamics 的权衡建模
③ Checkmate — 分布式 GPU 检查点系统(Tufts + MIT) - 复用网络复制梯度避免额外网络传输和磁盘 I/O - 可重构 in-network checkpoint replica placement - 结果:32-GPU 集群上吞吐量提升 ~100%,相比异步 checkpointing 改善 13.7%
④ DroidSpeak — KV Cache 跨微调变体共享 - 跨 fine-tuned 模型变体共享 KV Cache - 🔍 关注:与 vLLM 的 Prefix Caching 集成可行性
后续行动
- 必精读:FAST 和 JITServe 是 2026 年 LLM 推理系统的两大方向(通信优化 + 即时调度)
- 主题页更新:NSDI 2026 Systems for LLM
- 不写入
/review/或 GitHub
📄 B2|The AI Agents Stack(2026 Edition)— The AI Engineer Substack
来源:The AI Engineer / Substack
可信度:高(专注 AI 工程的优质技术专栏)
标签:agent-stack, 2026, MCP, guardrails, evaluation
2024→2026 最大变化(三点)
- Agent Guardrails 独立成学科:不再只是 I/O 过滤,而是 tool authorization + rate limiting + 事后验证
- "Guardrails before action" 模式出现:授权必须在 tool execution 层,不在 output 层——"By the time you filter the response, the agent already sent the email."
- OWASP MCP Top 10(beta)发布:首个面向 tool-connected agents 的安全清单
6 层 Agent Stack(2026)
Model → Gateway → Harness → Skills → Agent → Workspace
| 层级 | 核心功能 | 代表工具 |
|---|---|---|
| Model | 基础推理 | GPT-4o, Claude, Llama, DeepSeek |
| Gateway | 多模型路由、负载均衡 | OmniRoute, PortKey |
| Harness | 执行框架、memory、observability | LangGraph, LlamaIndex, OpenClaw |
| Skills | 可复用行为单元 | Skills (mattpocock), MCP servers |
| Agent | 自主决策、工具调用、状态管理 | OpenClaw, Claude Code, AutoGPT |
| Workspace | 沙箱、文件、系统交互 | Claude Code, DSH Desktop |
评价
这是目前最清晰的 Agent 系统架构图。Memory 作为"第一等公民"替代了 2024 年的" afterthought"定位——这是 2026 年的核心范式转变。
后续行动
- 精读:OWASP MCP Top 10 安全清单(beta)
- 更新知识库:Agent Stack 2026 主题页
📄 B3|Simon Willison Substack — Agentic Engineering Patterns
来源:Simon Willison / Substack
发布时间:2026-02-20(近期回看价值高)
可信度:高(知名 AI 工程师,datasette.io 作者)
标签:agentic, production, prompt-caching, Claude-Code, 2026
核心洞察
① Prompt Caching 改变了 Agent 经济模型
Claude Code 等长时运行产品依赖 prompt caching 复用前序计算,显著降低延迟和成本。需监控 prompt cache hit rate 并设告警阈值。
② Andrej Karpathy:2025-12 月是关键节点
"coding agents basically didn't work before December and basically work since"
2025 年 12 月的模型质量跃升是 AI 编程的转折点——长期一致性和韧性显著提升。
③ Hoard things you know how to do
Simon 的工程建议:构建可复用技能库(Skills),而不是每次从零 prompt。
后续行动
- 精读:Simon Willison 的 prompt caching 工程实践
- 评价:与 OpenClaw 的 skills 机制对比
📄 B4|Rocky Bhatia Substack — How to Learn Agentic AI in 2026
来源:Rocky Bhatia / Substack
可信度:中(技术博客,非学术)
标签:agentic, learning-path, production, memory-systems
最有价值的工程心智模型
LLM ≠ Agent
Agent = LLM + Retrieval + Memory + Tools + Planning
+ State + Observability + Constraints + Execution Infrastructure
真实生产故障案例(记忆系统)
多 agent 共享 memory 时最奇怪的失败之一:agents 逐渐将合成摘要写回长期记忆,最终 生成的解释取代了源真值。系统输出保持连贯但已偏离事实。
学习路径建议(真实路线图)
- LLM fundamentals
- Retrieval systems(RAG)
- Workflow orchestration
- Tool execution
- Memory architectures ← 2026 年最被低估
- Reliability engineering
- Security + governance
- Multi-agent coordination
- Operational economics
后续行动
- 审稿:Memory architectures 在多 agent 场景下的故障模式
- 更新知识库:Agentic AI 学习路径 2026
☁️ 三、Cloud-Native(分布式系统 / K8s / 云原生)
🔬 C1|Cloud-Native + Distributed Systems for LLM — 研究议程论文
来源:arXiv:2604.17227v1
标题:Cloud-native and Distributed Systems for Efficient and Scalable Large Language Models – A Research Agenda
可信度:高(arXiv,2026 年最新)
标签:cloud-native, LLM-systems, distributed, research-agenda
核心论点
现有云原生抽象(容器化、微服务、auto-scaling、服务网格)对 LLM 工作负载既有适配也有局限: - 适配:弹性、容错、 parallelism - 局限:LLM 的计算/通信/能效特性需要 LLM-aware 系统设计
开放研究问题
- LLM-aware 资源管理(不是简单 GPU 调度)
- 分布式 LLM 推理的 consistency management
- 能源效率作为一等优化目标
- decentralized control for LLM workloads
评价
这篇是少见的同时覆盖 cloud-native + LLM 的研究议程论文。对理解 LLM 基础设施的系统视角有帮助,但无需精读——浏览 + 记住主要结论即可。
📄 C2|Post-Deterministic Distributed Systems — 分布式系统新范式
来源:arXiv:2606.01722
标题:Post-Deterministic Distributed Systems: A New Foundation for Trustworthy Autonomous Infrastructure
作者:J He(2026,Cited by 1)
可信度:中(早期工作,仅 1 次引用)
标签:distributed-systems, autonomy, trustworthy-systems
初步判断
这是 2026 年的早期探索性论文,关注自主基础设施的可信性。
当前评级:观察级(1 次引用说明尚未被社区广泛认可)。
建议:加入知识库"值得关注但待验证"列表,后续跟踪引用数。
后续行动
- 2–3 个月后检查引用数再决定是否深入
📄 C3|NSDI 2026 — PLB: 复制数据库优先级感知负载均衡
来源:DistillSys Research Index
标签:distributed-systems, load-balancing, database, 2026
摘要
PLB(Priority-Aware Load Balancing):在受限资源下对复制数据库的优先级感知调度。
评价
属于经典分布式数据库问题的新解法,适合数据库系统研究跟踪。
💻 四、CSDN(高价值技术文筛选)
注:今日 Tavily 搜索未直接命中 CSDN 内容。以下引用来自近期工程筛选积累。
CS1|vLLM SGLang 生产调试命令积累(持续更新)
来源:Jay 工程筛选积累 + CSDN 精选
标签:vllm, sglang, production, debugging, commands
核心命令参考(2026-09 整理)
vLLM OOM 排查:
# 查看 KV Cache 利用率
curl http://vllm:8000/metrics | grep kv_cache
# 调整 max_model_len
python -m vllm.entrypoints.openai.api_server \
--model meta-llama/Llama-3.1-70B \
--max_model_len 32768 \
--gpu_memory_utilization 0.85
SGLang 生产基准测试:
python -m sglang.benchmarks.launch_serving \
--model NousResearch/Meta-Llama-3-70B \
--num-prompts 1000 \
--concurrency 32
后续行动
- CSDN 来源待验证:需确认具体文章链接
- 建议:建立生产命令速查手册
🔬 五、Reproduction(可复现研究 / 基准 / 代码库)
🔬 R1|Awesome-Search-Agent-Papers — Agent 检索论文列表
来源:GitHub / YunjiaXi
标签:agent, RAG, search, paper-list, arxiv-2026
2026-07–2026-08 最新高价值论文
| 时间 | 论文 | 方向 |
|---|---|---|
| 2026.8 | EviGraph: Evidence-Guided Autonomous Research Agents | Agentic research |
| 2026.8 | Self-Correcting Long-Horizon Search Agents via Tree-Structured Memory | Long-horizon agent |
| 2026.7 | PATS: Policy-Aware Training Scaffolding for Agentic RL | Agentic RL |
| 2026.7 | CIGPO: Contextual Information-Gain Policy Optimization | Multi-turn evidence reading |
| 2026.7 | Agent-UCT: UCB Applied to Trees for Agentic Workflow + Cost-Awareness | Tree search + agents |
| 2026.7 | Reason Before You Retrieve: Agentic Planning for Multi-modal RAG | Multimodal RAG |
| 2026.7 | AREX: Recursively Self-Improving Agent for Deep Research | Self-improving agent |
高优先级精读建议
- Agent-UCT:将 UCB/UCT 引入 agent workflow 调度,成本感知决策——对生产 agent 资源调度有直接参考价值
- EviGraph:自主研究 agent 的 evidence-guided 机制——2026 agent 能力前沿
- Self-Correcting Long-Horizon:树结构记忆解决长时 horizon 漂移问题——实用性强
📄 R2|GitHub 2026-09 AI Agent 生态格局
来源:Shop.zimaspace.com + NocoBase + Web3.career
可信度:中(综合报道,有原始链接可验证)
标签:github-trending, agent-ecosystem, 2026, open-source
2026-09 新趋势:Agent 基础设施竞争 Model 仓库
关键变化:开源 AI 活动重心从 model repositories 转向 agent infrastructure
代表项目(2026-08 新增 star):
| 项目 | 类型 | +Stars | 特点 |
|---|---|---|---|
| Orca | Multi-agent orchestration | +18.8K | 并行编码 agent 协调 |
| OmniRoute | AI Gateway | +16.8K | 多 AI 工具/模型路由单端点 |
| MoneyPrinterTurbo | AI Video Workflow | +17.1K | 自动化短视频全流程 |
| DeepSeek Harness | Agent Runtime | - | agent 执行运行时 |
Top 20 AI Agent GitHub(2026 按 star 排序)
| 排名 | 项目 | Star | 类型 |
|---|---|---|---|
| 1 | Langflow | 146K | Visual Builder |
| 2 | Dify | 136K | Visual Builder |
| 3 | CrewAI | 95K | Multi-agent |
| 4 | LangChain | 87K | Framework |
| 5 | Flowise | 51K | Visual Builder |
| 6 | AutoGen | 41K | Multi-agent |
| 7 | RAGFlow | 77K | RAG+Agent |
| 8 | LobeHub | 74K | Multi-agent |
| 9 | MetaGPT | 66K | Multi-agent |
| 10 | OpenBB | 65K | Finance AI |
评价
三大趋势: 1. Visual/Low-Code Builder 主导(Langflow, Dify, Flowise 前五占三) 2. Multi-Agent Orchestration 是新前沿(CrewAI, AutoGen, Orca) 3. 开源正在复苏:企业从封闭 AI 工具回迁开源(Eclipse Foundation 2026 预测验证)
📋 汇总
| 分类 | 高价值条目 | 行动 |
|---|---|---|
| Database | 向量库选型指南(pgvector→Pinecone 路径)、Graph-O1、Agentic RAG SoK | 精读 Graph-O1、更新 RAG 主题页 |
| Backend | NSDI 2026(FAST、JITServe、Checkmate、DroidSpeak)、AI Agents Stack 2026(The AI Engineer)、Simon Willison agentic patterns | 必精读 FAST + JITServe、更新 Agent Stack 主题页 |
| Cloud-Native | Cloud-native LLM 研究议程(arXiv 2604.17227)、Post-Deterministic Distributed Systems | 观察级:跟踪引用数 |
| CSDN | vLLM/SGLang 生产命令积累 | 待补充 CSDN 原文链接验证 |
| Reproduction | Awesome-Search-Agent-Papers(2026-07/08 最新)、GitHub 2026-09 AI Agent 生态 | 精读 Agent-UCT、EviGraph |
实际写入路径:/shared/research-kb/inbox/jay/2026-09-04T1410-jay-five-category-briefing.md
本轮未写入原因:N/A — 已写入
标签:database, backend, cloud-native, csdn, reproduction, agentic-rag, nsdi2026, vector-db, agent-stack, github-trending
撰写人:Jay
时间:2026-09-04 14:10 CST(03:10 UTC)