10. Cloud Native System for LLM Inference Serving（arXiv 2507.18007）

• 类型：arxiv
• 标识：2507.18007
• 链接：https://arxiv.org/abs/2507.18007
• 主题：agent, database, engineering, evaluation, llm-infra, rag, risk
• 来源文件：
• /inbox/jay/2026-06-17-1510-afternoon-briefing-database-backend-cloudnative-inference.md

可复用信息

• • 链接：https://saiyampathak.substack.com/p/netease-games-cut-llm-cold-starts
• • 来源：arXiv | 2025年7月（持续更新）
• • 类型：学术论文
• • 核心内容：
• • 容器化、微服务、动态调度如何改善 LLM 推理
• • Kubernetes-based autoscaling 评估
• • 延迟-吞吐-成本权衡分析
• • 评价：学术视角的系统性综述，可作为云原生 AI 推理的知识基线

写作用途

• 可放入 RAG / 知识库 / 检索增强相关工作的对比段。
• 可用于 Agent 架构、记忆、工具调用或多智能体研究背景。
• 可用于系统实现、实验平台或工程约束说明。
• 可用于局限性、风险、失效模式和未来工作。

待补齐

• BibTeX / 正式引用格式
• 方法与实验设置细节
• 与现有工作的差异点
• 是否有代码和数据集