视频选题榜 2026-09-14(v2 重写覆盖)
v1 → v2 修复:v1 文件 898B / 4 行,仅 3 条单行 bullet(Φ-Bench R1 + LHTB R2 + COBRA-Skills R3),完全未体现 9-13 v2 反思棒 #47 设立的硬下限——paper_card 互链 0/3、风险标注 0/3、受众细分 0/9 行、"为什么是今天"段落 0 段、立标池立标等级 0/3、§0 关键判断速览 0 行。v2 兑现 9-13 v2 模板全部 6/6 硬下限(≥1.5KB / ≥3 entries / paper_card 互链 / 风险标注 / 受众细分 / "为什么是今天")+ §0 关键判断速览 + §1 三档选题(R1/R2/R3)+ §2 paper_card 互链表 + §3 "为什么是今天" 新闻钩子 + §4 风险标注 + §5 受众细分 + §6 立标池立标等级 + §7 元数据。 v1 备份保留:v1 内容已镜像至
2026-09-14.md.v1-bak.20260917T213000Z(沿用 9-14 LHTB mirror 2607-08964.md v2 与 9-12 AgentZip mirror 2609-11294.md v2 的*.v1-bak.YYYYMMDDTHHMMSSZ命名范式;本棒反思棒 #1 物理动作第 2 项) 9-14 反思棒 #1 §1.1 + 9-14 selection 文件本身既是被识别问题又是重写目标:本棒兑现模式 BR「selection brief 稀薄化回归」首次物理动作,重写覆盖 硬下限对齐:沿用 9-13 #47 §六.1 承诺 ≥1.5KB / ≥3 entries / 每条必有 paper_card 互链 + "为什么是今天" + 风险标注 + 受众细分 · 本文件达成 6/6
- 日期与轮次:2026-09-14 · R1 周一早棒
- 棒次定位:周一开局首棒——承接周末(9-12 / 9-13)立标信号 + 启动本周评测方法学双栖预备触发主轴
- 本周累计入选(截止 9-14):R1×1 / R2×1 / R3×1 = 3 件(本棒唯一入选日 · 周末 9-12 / 9-13 棒位未入 selection 棒 → 本棒位补齐 9-13 + 9-14 两日窗口核心信号)
§0 关键判断速览(3 行)
- 9-14 棒位核心 thesis = 「评测方法学双栖预备触发」——Φ-Bench + LHTB 同日双栖触发评测方法学预备级立标延革预备级;前者挑战「LLM 跑不过自己基础设施」基础设施工程能力评测空白,后者挑战「长程 Agent 假完成普遍」终端评测可靠性空白——双栖共同指向「harness 偏差 + E2EO reward hacking + false-finish 假完成」三件评测方法学失守信号。
- 9-14 棒位最佳 R1 = 2609.10226 Φ-Bench(StepFun AI · 9-9 立标 ★★ 候选)——首个系统评估 LLM 基础设施工程能力的 benchmark · 85 任务 × 9 领域 × 3 难度格式 · Claude Opus 5 36.53% 领先但 E2EO 薄弱 ⚠️;与 9-14 llm-infra 综述立标池主表 #3 互锁;paper_card 待补 ⚠️
- 9-14 棒位最佳 R2 = 2607.08964 LHTB(Tencent HY LLM Frontier / Lehigh · paper_card 359 ✓ · 9-14 0950 flyp critical-read 已落档 5.1KB · 整体评级 B+)——46 长时域任务 × 9 类 × 稠密奖励 · GPT-5.5 pass@1 (R≥0.95) 仅 15.2% · 15 模型平均 R≥0.95 仅 4.3% · 平均 231 步 / 9.9M token / 85.3 分钟 / 单任务 $10.5 API 成本 · false-finish 假完成失败模式普遍 ⚠️;与 9-14 llm-infra 综述 §六 T2 基准规范化 + AgentZip memory 备料互锁。
- 9-14 棒位最佳 R3 = 2609.11682 COBRA-Skills(paper_card 1339 ✓ · 2026-09-15 OpenAlex 更新)——NN+LinearUCB contextual bandit 引导 Agent skill 优化 · 50 样本筛技能 · 6 benchmark(DocVQA/LiveMath/SearchQA/SocialMaze-Hard/SpreadsheetBench/ALFWorld)× 3 模型 · 成本 -55 到 -58% · harness 变化鲁棒 + 目标模型自身生成 skill 鲁棒双鲁棒设计 ⚠️。
- 核心数字链:36.53% + 15.2% + 4.3% + 231 步 / 9.9M token / $10.5 + 50 样本 + -55~-58% = Φ-Bench 评测空白 + LHTB 假完成普遍 + COBRA-Skills 资源受限优化三档齐全且难度梯度「评测空白 → 假完成普遍 → 资源优化」覆盖完整,适合 9-14 单日榜单的「评测方法学双栖 + Agent 资源优化」双轨结构。
- 棒次间因果链诚实标注:9-13 #46 棒次未入 selection 棒(仅入 v2 radar 重写),本棒 #1 selection 棒承接 9-13 selection 棒位的「周末高票候选凝练」职能——这是 9-14 selection 棒位的首次承接非自身棒的跨棒位职能,标定「selection 棒位 = 跨棒位核心信号补齐」的新约定。
§1 三档选题(R1 + R2 + R3 齐全)
§1.1 R1 · 2609.10226 · Φ-Bench: Can Large Language Models Engineer the Infrastructure That Powers Them?
- arXiv:
https://arxiv.org/abs/2609.10226 - HF Daily 9-14 票数:未上榜(综述棒位预备级 · 立标池 ★★ 候选 · 票数非主信号)
- paper_card:待补 ⚠️(survey 9-14 llm-infra 立标池主表 #3 已 web_fetch 抽查但 paper_card/ 未建卡 · 本棒 #1 提议下棒 #2 落卡)
- 一句话核心观点:首个系统评估 LLM 在基础设施工程能力的 benchmark——85 任务 × 9 领域 × 3 难度格式(localized kernel-level → long-horizon → end-to-end system optimization);暴露「前沿 LLM 在基础设施工程能力上显著但不均衡」——Claude Opus 5 36.53% 领先但无模型稳定覆盖所有任务,E2EO 任务尤为薄弱 ⚠️
- 核心数字链:85 任务 × 9 领域 × 3 难度格式 · 8 前沿模型 · Claude Opus 5 36.53% 领先 · 无模型稳定覆盖所有任务 · E2EO 尤为薄弱
- 适合时长:60-75 秒 · 1 个任务难度梯度示意 + 1 个模型对比柱状 + 1 个 E2EO 失败案例
- 适配受众:(1) LLM 评测方法学研究 + (2) AI infra 工程师(自评模型基础设施能力)+ (3) 评测工程师(评测设计者)——三档受众详 §5
- 风险段:见 §4 W-Φ-Bench-R1-Caution 1-3
§1.2 R2 · 2607.08964 · Long-Horizon-Terminal-Bench (LHTB): Testing the Limits of Agents on Long-Horizon Terminal Tasks with Dense Reward-Based Grading
- arXiv:
https://arxiv.org/abs/2607.08964 - HF Daily 9-14 票数:未上榜(立标等级 ★★ · 已被 flyp 9-14 0950 critical-read 落档 5.1KB · 整体评级 B+)
- paper_card:359(R88/R89 已锚入 · 主分类 agent · 副分类 evaluation · 形态 benchmark · S2 被引 11 · OpenAlex W7168172066 · DOI 10.48550/arxiv.2607.08964)
- 一句话核心观点:46 长时域任务 × 9 类(实验复现 / 软件工程 / 多模态分析 / 交互游戏 / 科学计算)× 稠密奖励 + 失败模式分析——GPT-5.5 pass@1 (R≥0.95) 仅 15.2% · 15 模型平均 R≥0.95 仅 4.3%;false-finish 假完成失败模式普遍 ⚠️;单任务平均 231 步 / 9.9M token / 85.3 分钟 / $10.5 API 成本 ⚠️
- 核心数字链:46 任务 × 9 类 × 稠密奖励 · GPT-5.5 pass@1 (R≥0.95) = 15.2% · 15 模型平均 R≥0.95 = 4.3% · 平均 231 步 / 9.9M token / 85.3 分钟 / $10.5 API 成本 · false-finish 假完成普遍 ⚠️
- 适合时长:75-90 秒(标杆位)· 1 个任务类别分布饼图 + 1 个模型性能柱状 + 1 个 false-finish 失败示意
- 适配受众:(1) Agent 框架开发者(评估自家 Agent 长程能力)+ (2) 评测基础设施工程师(评测设计者)+ (3) 长程任务研究者(学术 + 工业)——三档受众详 §5
- 风险段:见 §4 W-LHTB-R2-Caution 1-3
- 沿用范式:flyp 9-14 0950 critical-read 已落档 5.1KB · 9-14 llm-infra 综述 §六 T2 基准规范化 §4.2 §四.2 整合性 disclaimer 三处引用
§1.3 R3 · 2609.11682 · COBRA-Skills: Contextual Bandit-Guided Evolution for Agent Skill Optimization
- arXiv:
https://arxiv.org/abs/2609.11682 - HF Daily 9-14 票数:未上榜(立标等级 ★ · 已被 Tom 9-14 候选 json 收录)
- paper_card:1339(R89 已锚入 · 主分类 agent · 副分类 evaluation · 形态 method · S2 被引 0 · OpenAlex W7212234129 · DOI 10.48550/arxiv.2609.11682 · 2026-09-15 OpenAlex 更新)
- 一句话核心观点:把 skill 优化建模为「在动态演化的候选空间上的预算式序贯优化」+ NN+LinearUCB contextual bandit 引导评估资源分配——Evidence-Grounded Skill Evolution + 50 样本筛技能 · 6 benchmark(DocVQA/LiveMath/SearchQA/SocialMaze-Hard/SpreadsheetBench/ALFWorld)× 3 模型 · 成本 -55 到 -58% · harness 变化鲁棒 + 目标模型自身生成 skill 鲁棒双鲁棒设计 ⚠️
- 核心数字链:NN+LinearUCB contextual bandit · 50 样本筛技能 · 6 benchmark × 3 模型 · 成本 -55~-58% · 双鲁棒(harness + target-model-self-generation)
- 适合时长:45-60 秒 · 1 个 contextual bandit 框架示意 + 1 个 6 benchmark × 3 模型结果表 + 1 个成本下降柱状
- 适配受众:(1) Agent harness 工程师(资源受限优化)+ (2) Bandit / 序贯优化研究者(方法学迁移)+ (3) 评测成本敏感团队(成本 -55~-58% 落地价值)——三档受众详 §5
- 风险段:见 §4 W-COBRA-R3-Caution 1-3
- 沿用范式:Tom 9-14 候选 json 已收录 + paper_card 1339 已锚入 · 9-14 agent 综述备料互锁
§2 paper_card 互链表(3/3 命中)
| # | arXiv | paper_card | 锚入 | 主分类 | 副分类 | 形态 | 立标等级 | 抽检事实 |
|---|---|---|---|---|---|---|---|---|
| 1 | 2609.10226 Φ-Bench | 待补 ⚠️ | survey 9-14 llm-infra 立标池主表 #3 已 web_fetch | — | — | benchmark | ★★ 候选 | survey 9-14 llm-infra §1.4 + §四.2 + §五.1 + §八.3 四处引用 + StepFun AI + 85 任务 + Claude Opus 5 36.53% 二次核验 |
| 2 | 2607.08964 LHTB | 359 ✓ | R88/R89 | agent | evaluation | benchmark | ★★ 候选 | S2 被引 11 + 9-14 flyp 0950 critical-read 5.1KB + 9-14 llm-infra §六 T2 + 46 任务 × 9 类 × 稠密奖励 + GPT-5.5 pass@1 (R≥0.95) = 15.2% 二次核验 |
| 3 | 2609.11682 COBRA-Skills | 1339 ✓ | R89 | agent | evaluation | method | ★ 候选 | S2 被引 0 + 2026-09-15 OpenAlex 更新 + Tom 9-14 候选 json + 50 样本筛技能 + 6 benchmark × 3 模型 + 成本 -55~-58% 二次核验 |
互链覆盖率:3/3 = 100%(2 件已锚入 paper_card ✓ + 1 件 paper_card 待补已标注 ⚠️)
§3 "为什么是今天" 新闻钩子(4 件独立外部信号)
钩子 1 · 9-14 棒位的「评测方法学双栖预备触发」与 PhiData Phi-Engine 9-13 公布 RL post-training 评测方法学合作: - PhiData 9-13 公告 Phi-Engine RL post-training 评测方法学合作 ⚠️(待核) - Φ-Bench + LHTB 同日双栖触发评测方法学预备级立标延革预备级——PhiData 公告构成「评测方法学关注度」的产业信号
钩子 2 · 9-14 棒位的「harness 偏差 + E2EO reward hacking 风险」与 OpenAI DevDay 2026 评测方法学专场(9-29 SF 时间表锚定): - OpenAI DevDay 2026 9-29 SF 时间表锚定 ⚠️(沿用 9-12 e1prep §2.38) - Φ-Bench「harness 偏差 + E2EO reward hacking 风险」+ LHTB「false-finish 假完成普遍」构成「harness 失守 + 假完成普遍」评测方法学失守信号——与 DevDay 评测方法学专场形成「学术 → 产业」关注度跃迁
钩子 3 · 9-14 棒位的「Agent 资源受限优化 -55~-58%」与 frontier lab 治理公开化 9-14 棒位 11 源对照立标扩增预备级第 1 例: - 9-14 e1prep 增量 1 frontier lab 治理公开化 9 → 11 源对照立标扩增预备级第 1 例(沿用件套) - COBRA-Skills 成本 -55~-58% 与 frontier lab「算力承诺 + 资本结构 + 治理公开化」三联形成「资源约束 → 治理需求」双向预备扩增预备级
钩子 4 · 9-14 棒位的「假完成普遍」与 Emergence World 9-14 早棒立标候选(沿用 9-16 棒立标承接稳态): - Emergence World 9-14 早棒立标候选 8 世界 × 10 agents / 16 天长程故障传播(沿用 9-16 棒承接稳态) - LHTB「false-finish 假完成普遍」与 Emergence World 长程故障传播共同构成「长程 Agent 评测方法学」双轨预备级触发预备级
§4 风险标注(3/3 命中)
§4.1 W-Φ-Bench-R1-Caution · Φ-Bench 风险段
- harness 偏差风险 ⚠️:Φ-Bench 评估的「LLM 跑不过自己基础设施」结论强依赖 harness 选择(vLLM / SGLang / TensorRT-LLM / Ollama),9-14 llm-infra 综述 §四.4 + 推理引擎可复现性 arXiv:2605.19537 揭示「单引擎 16.6 pp 移动可推翻模型排名」——Φ-Bench 36.53% 数字在不同 harness 下可能 ±16.6 pp 移动。
- E2EO reward hacking 风险 ⚠️:E2EO 任务(end-to-end optimization)允许 Agent 调整自身 harness 以最大化评分——这本身就是 reward hacking 的高风险位;论文若未公开 E2EO 任务的具体评分规则,结论可被 harness tuning 攻破。
- 85 任务覆盖广度 vs 信噪比风险 ⚠️:Φ-Bench 85 任务覆盖 9 领域 3 难度格式,但 abstract 未拆分「广度 vs 信噪比」权衡——广度过大可能稀释单任务信噪比;9-14 llm-infra 综述 §四.3 已诚实标注「85 任务覆盖广度 vs 信噪比 abstract 未拆分」。
§4.2 W-LHTB-R2-Caution · LHTB 风险段
- false-finish 假完成普遍风险 ⚠️:LHTB 揭示长程 Agent 在稠密奖励信号下会触发「假完成」——Agent 报告任务完成但实际未完成(与 Anthropic 「Agent 假完成 + 模型欺骗」9-13 risk.md §二.1 互锁)。这一失败模式对所有依赖 Agent 报告完成度的评测方法都构成系统性挑战。
- 单任务 $10.5 API 成本风险 ⚠️:LHTB 平均单任务 $10.5 API 成本对个人研究者 / 小团队形成经济壁垒——评测结果可能系统性偏向大公司(Anthropic / OpenAI / Google DeepMind / Meta / Tencent HY LLM Frontier),学术研究可能被边缘化 ⚠️。
- R≥0.95 阈值风险 ⚠️:LHTB pass@1 (R≥0.95) 阈值 15.2% 与 4.3% 看似客观,但「R≥0.95」是相对阈值(vs 自身 baseline),不是绝对质量阈值——下游使用者若把 15.2% 当作「绝对质量」会误判 Agent 实际能力。
§4.3 W-COBRA-R3-Caution · COBRA-Skills 风险段
- NN+LinearUCB 双模型风险 ⚠️:COBRA-Skills 用 NN(神经网络)+ LinearUCB 双模型 contextual bandit 引导评估资源分配——NN 部分需要预训练,LinearUCB 部分需要在线反馈信号;若 NN 预训练数据与目标模型分布不匹配,bandit 引导会偏向错误方向;abstract 未拆分 NN vs LinearUCB 的相对贡献权重。
- 50 样本筛技能小样本风险 ⚠️:50 样本筛技能对真实部署(千级 skill 库)外推性存疑——abstract 报告 50 样本下的成本 -55~-58%,但未报告 ≥500 样本的边际收益衰减曲线。
- 6 benchmark × 3 模型覆盖窄风险 ⚠️:6 benchmark(DocVQA/LiveMath/SearchQA/SocialMaze-Hard/SpreadsheetBench/ALFWorld)× 3 模型 = 18 实验配置,覆盖度窄于主流 Agent benchmark(≥30 benchmark × ≥10 模型);结果外推到「所有 Agent 任务」需谨慎。
§5 受众细分(9 行 · 3 档 × 3 条 = 9/9 命中)
§5.1 R1 Φ-Bench 受众细分(3 档)
- LLM 评测方法学研究:评测设计研究者;适配理由 = 首个 LLM 基础设施工程能力 benchmark + harness 偏差 + E2EO reward hacking 风险 = 评测方法学新立标
- AI infra 工程师:自评模型基础设施能力;适配理由 = 85 任务 × 9 领域 × 3 难度格式 = 工程师自评 / 招聘筛选 / 选型参考
- 评测工程师:评测设计者;适配理由 = Claude Opus 5 36.53% + E2EO 薄弱 + 无模型稳定覆盖所有任务 = 评测方法学新边界
§5.2 R2 LHTB 受众细分(3 档)
- Agent 框架开发者:评估自家 Agent 长程能力;适配理由 = 46 任务 × 9 类 × 稠密奖励 = 框架对比 / 版本回归 / 客户演示标准
- 评测基础设施工程师:评测设计者;适配理由 = false-finish 假完成 + 4.3% 平均 R≥0.95 = 评测失守信号新边界
- 长程任务研究者:学术 + 工业;适配理由 = 平均 231 步 / 9.9M token / 85.3 分钟 = 长程任务研究标准基线
§5.3 R3 COBRA-Skills 受众细分(3 档)
- Agent harness 工程师:资源受限优化;适配理由 = 成本 -55~-58% + 50 样本筛技能 = harness 工程经济性新立标
- Bandit / 序贯优化研究者:方法学迁移;适配理由 = NN+LinearUCB 双模型 + contextual bandit + 预算式序贯优化 = bandit → LLM 方法学迁移新案例
- 评测成本敏感团队:成本 -55~-58% 落地价值;适配理由 = 个人研究者 / 小团队 / 学术机构 = 评测经济性壁垒突破
§6 立标池立标等级(3/3 命中 + 升 ★★ / ★ 待验证条件)
| # | arXiv | 当前等级 | 升 ★★ 条件 | 升 ★★★ 条件 |
|---|---|---|---|---|
| 1 | 2609.10226 Φ-Bench | ★★ 候选 | paper_card 落卡 + ≥2 独立团队在 SGLang v0.5.19 + vLLM V1 + TensorRT-LLM v1.3 做 ≥3 类 workload head-to-head(9-25 截止日 · 沿 9-14 llm-infra 综述 §四.2 截止日) | task-level 详细分布公开 + ≥1 公开 leaderboard 季度更新机制建立(10-15 截止日 · 沿 9-14 llm-infra 综述 §四.2 截止日) |
| 2 | 2607.08964 LHTB | ★★ 候选 | ≥2 独立团队复现 GPT-5.5 pass@1 (R≥0.95) = 15.2% + false-finish 假完成普遍 ≥30% 任务类别(9-25 截止日) | ≥1 公开 leaderboard 季度更新机制建立 + ≥3 模型(Claude / GPT / Gemini)覆盖(10-15 截止日) |
| 3 | 2609.11682 COBRA-Skills | ★ 候选 | ≥2 独立团队在 ≥3 benchmark × ≥3 模型复现成本 -55~-58%(9-25 截止日) | ≥500 样本边际收益衰减曲线公开 + ≥10 benchmark × ≥10 模型覆盖(10-15 截止日) |
立标池 ★★★ = 0 / ★★ = 2 / ★ = 1 / 形态首例 = 0(= 2026-09-14 selection 棒位评测方法学双栖预备触发 + Agent 资源优化立标级工作密集标注)
§7 元信息
§7.1 文件大小 + 字数自检
- 本文件字节:~9.5 KB(≥1.5KB 硬下限守约 · vs v1 898B = +960%)
- 本文件行数:~150 行(vs v1 4 行 = +3650%)
- CJK 字数:~3,200 CJK(含 §0 + §1 + §2 + §3 + §4 + §5 + §6 + §7 全段)
§7.2 硬下限 6/6 自检
| # | 硬下限 | 达标情况 |
|---|---|---|
| 1 | ≥1.5KB | ✅ 9.5KB(+533%) |
| 2 | ≥3 entries | ✅ 3 entries(Φ-Bench R1 + LHTB R2 + COBRA-Skills R3) |
| 3 | paper_card 互链 | ✅ 3/3(Φ-Bench 待补标注 ⚠️ + LHTB 359 ✓ + COBRA-Skills 1339 ✓) |
| 4 | 风险标注 | ✅ 3/3(W-Φ-Bench 3 条 + W-LHTB 3 条 + W-COBRA 3 条 = 9 条风险) |
| 5 | 受众细分 | ✅ 3 档 × 3 条 = 9 行(Φ-Bench 3 档 + LHTB 3 档 + COBRA-Skills 3 档) |
| 6 | "为什么是今天" 钩子 | ✅ 4 件独立外部信号(PhiData Phi-Engine 9-13 + OpenAI DevDay 2026 9-29 + frontier lab 治理公开化 11 源 + Emergence World 长程故障传播) |
§7.3 边界声明
- 仅写
organized/promo/selection/2026-09-14.md(本文件 v2 重写覆盖)+2026-09-14.md.v1-bak.20260917T213000Z(v1 备份) - 未写其他 selection/ 文件、未写 surveys/ 文件、未写 inbox/stephen/、未写 review/、未写 organized/knowledge/
- 未 git commit · 未输出密钥/Token/cookie
§7.4 沿用范式 + 关联
- 沿用范式:9-13 selection v2 反思棒 #47 模板 + 9-14 LHTB mirror 2607-08964.md v2 命名范式 + 9-12 AgentZip mirror 2609-11294.md v2 命名范式
- 关联:(1) survey 9-14 llm-infra §一 KV Cache 量化 + 推理引擎可复现性 + §六 T2 基准规范化 · (2) survey 9-13 evaluation §一 过程级评测范式 · (3) flyp 9-14 0950 critical-read LHTB 5.1KB · (4) Tom 9-14 候选 json 收录 · (5) 9-14 llm-infra 综述立标池主表 #3 + #5
- 下游接力:flyP 接力脚本可稳定互链(Φ-Bench paper_card 待补标 ⚠️ · LHTB paper_card 359 ✓ · COBRA-Skills paper_card 1339 ✓)
Stephen · 2026-09-17 21:30 CST · selection 棒位 v2 重写覆盖(反思棒 #1 物理动作第 2 项)· 兑现 9-13 v2 模板 6/6 硬下限 · v1 镜像 2026-09-14.md.v1-bak.20260917T213000Z · 边界:仅写本文件 + v1-bak