1. vLLM Startup Latency: Six-Step Systematic Characterization

• 类型：arxiv
• 标识：2606.07362
• 链接：https://arxiv.org/abs/2606.07362
• 主题：agent, database, engineering, evaluation, llm-infra, risk
• 来源文件：
• /inbox/jay/2026-06-11-inference-benchmark-engineering.md

可复用信息

---

• • 来源: arXiv:2606.07362v1 (2026)
• • 类型: 系统性能分析 / 学术 benchmark
• • 原文链接: https://arxiv.org/html/2606.07362v1
• • 可信度: 高（系统性实验，22个模型，H100 + L40S，vLLM v0.10.1.1）
• • 核心观点:
• • 首次对 vLLM 引擎启动过程做六步分解（model loading → tokenizer loading → memory allocation → cache engine init → worker spawning → API readiness）

写作用途

• 可用于 Agent 架构、记忆、工具调用或多智能体研究背景。
• 可用于系统实现、实验平台或工程约束说明。
• 可用于局限性、风险、失效模式和未来工作。

待补齐

• BibTeX / 正式引用格式
• 方法与实验设置细节
• 与现有工作的差异点
• 是否有代码和数据集