视频选题榜 2026-09-14(v2 重写覆盖)

v1 → v2 修复:v1 文件 898B / 4 行,仅 3 条单行 bullet(Φ-Bench R1 + LHTB R2 + COBRA-Skills R3),完全未体现 9-13 v2 反思棒 #47 设立的硬下限——paper_card 互链 0/3、风险标注 0/3、受众细分 0/9 行、"为什么是今天"段落 0 段、立标池立标等级 0/3、§0 关键判断速览 0 行。v2 兑现 9-13 v2 模板全部 6/6 硬下限(≥1.5KB / ≥3 entries / paper_card 互链 / 风险标注 / 受众细分 / "为什么是今天")+ §0 关键判断速览 + §1 三档选题(R1/R2/R3)+ §2 paper_card 互链表 + §3 "为什么是今天" 新闻钩子 + §4 风险标注 + §5 受众细分 + §6 立标池立标等级 + §7 元数据。 v1 备份保留:v1 内容已镜像至 2026-09-14.md.v1-bak.20260917T213000Z(沿用 9-14 LHTB mirror 2607-08964.md v2 与 9-12 AgentZip mirror 2609-11294.md v2 的 *.v1-bak.YYYYMMDDTHHMMSSZ 命名范式;本棒反思棒 #1 物理动作第 2 项) 9-14 反思棒 #1 §1.1 + 9-14 selection 文件本身既是被识别问题又是重写目标:本棒兑现模式 BR「selection brief 稀薄化回归」首次物理动作,重写覆盖 硬下限对齐:沿用 9-13 #47 §六.1 承诺 ≥1.5KB / ≥3 entries / 每条必有 paper_card 互链 + "为什么是今天" + 风险标注 + 受众细分 · 本文件达成 6/6


  • 日期与轮次:2026-09-14 · R1 周一早棒
  • 棒次定位:周一开局首棒——承接周末(9-12 / 9-13)立标信号 + 启动本周评测方法学双栖预备触发主轴
  • 本周累计入选(截止 9-14):R1×1 / R2×1 / R3×1 = 3 件(本棒唯一入选日 · 周末 9-12 / 9-13 棒位未入 selection 棒 → 本棒位补齐 9-13 + 9-14 两日窗口核心信号)

§0 关键判断速览(3 行)

  • 9-14 棒位核心 thesis = 「评测方法学双栖预备触发」——Φ-Bench + LHTB 同日双栖触发评测方法学预备级立标延革预备级;前者挑战「LLM 跑不过自己基础设施」基础设施工程能力评测空白,后者挑战「长程 Agent 假完成普遍」终端评测可靠性空白——双栖共同指向「harness 偏差 + E2EO reward hacking + false-finish 假完成」三件评测方法学失守信号。
  • 9-14 棒位最佳 R1 = 2609.10226 Φ-Bench(StepFun AI · 9-9 立标 ★★ 候选)——首个系统评估 LLM 基础设施工程能力的 benchmark · 85 任务 × 9 领域 × 3 难度格式 · Claude Opus 5 36.53% 领先但 E2EO 薄弱 ⚠️;与 9-14 llm-infra 综述立标池主表 #3 互锁;paper_card 待补 ⚠️
  • 9-14 棒位最佳 R2 = 2607.08964 LHTB(Tencent HY LLM Frontier / Lehigh · paper_card 359 ✓ · 9-14 0950 flyp critical-read 已落档 5.1KB · 整体评级 B+)——46 长时域任务 × 9 类 × 稠密奖励 · GPT-5.5 pass@1 (R≥0.95) 仅 15.2% · 15 模型平均 R≥0.95 仅 4.3% · 平均 231 步 / 9.9M token / 85.3 分钟 / 单任务 $10.5 API 成本 · false-finish 假完成失败模式普遍 ⚠️;与 9-14 llm-infra 综述 §六 T2 基准规范化 + AgentZip memory 备料互锁。
  • 9-14 棒位最佳 R3 = 2609.11682 COBRA-Skills(paper_card 1339 ✓ · 2026-09-15 OpenAlex 更新)——NN+LinearUCB contextual bandit 引导 Agent skill 优化 · 50 样本筛技能 · 6 benchmark(DocVQA/LiveMath/SearchQA/SocialMaze-Hard/SpreadsheetBench/ALFWorld)× 3 模型 · 成本 -55 到 -58% · harness 变化鲁棒 + 目标模型自身生成 skill 鲁棒双鲁棒设计 ⚠️。
  • 核心数字链:36.53% + 15.2% + 4.3% + 231 步 / 9.9M token / $10.5 + 50 样本 + -55~-58% = Φ-Bench 评测空白 + LHTB 假完成普遍 + COBRA-Skills 资源受限优化三档齐全且难度梯度「评测空白 → 假完成普遍 → 资源优化」覆盖完整,适合 9-14 单日榜单的「评测方法学双栖 + Agent 资源优化」双轨结构。
  • 棒次间因果链诚实标注:9-13 #46 棒次未入 selection 棒(仅入 v2 radar 重写),本棒 #1 selection 棒承接 9-13 selection 棒位的「周末高票候选凝练」职能——这是 9-14 selection 棒位的首次承接非自身棒的跨棒位职能,标定「selection 棒位 = 跨棒位核心信号补齐」的新约定。

§1 三档选题(R1 + R2 + R3 齐全)

§1.1 R1 · 2609.10226 · Φ-Bench: Can Large Language Models Engineer the Infrastructure That Powers Them?

  • arXiv:https://arxiv.org/abs/2609.10226
  • HF Daily 9-14 票数:未上榜(综述棒位预备级 · 立标池 ★★ 候选 · 票数非主信号)
  • paper_card:待补 ⚠️(survey 9-14 llm-infra 立标池主表 #3 已 web_fetch 抽查但 paper_card/ 未建卡 · 本棒 #1 提议下棒 #2 落卡)
  • 一句话核心观点:首个系统评估 LLM 在基础设施工程能力的 benchmark——85 任务 × 9 领域 × 3 难度格式(localized kernel-level → long-horizon → end-to-end system optimization);暴露「前沿 LLM 在基础设施工程能力上显著但不均衡」——Claude Opus 5 36.53% 领先但无模型稳定覆盖所有任务,E2EO 任务尤为薄弱 ⚠️
  • 核心数字链:85 任务 × 9 领域 × 3 难度格式 · 8 前沿模型 · Claude Opus 5 36.53% 领先 · 无模型稳定覆盖所有任务 · E2EO 尤为薄弱
  • 适合时长:60-75 秒 · 1 个任务难度梯度示意 + 1 个模型对比柱状 + 1 个 E2EO 失败案例
  • 适配受众:(1) LLM 评测方法学研究 + (2) AI infra 工程师(自评模型基础设施能力)+ (3) 评测工程师(评测设计者)——三档受众详 §5
  • 风险段:见 §4 W-Φ-Bench-R1-Caution 1-3

§1.2 R2 · 2607.08964 · Long-Horizon-Terminal-Bench (LHTB): Testing the Limits of Agents on Long-Horizon Terminal Tasks with Dense Reward-Based Grading

  • arXiv:https://arxiv.org/abs/2607.08964
  • HF Daily 9-14 票数:未上榜(立标等级 ★★ · 已被 flyp 9-14 0950 critical-read 落档 5.1KB · 整体评级 B+)
  • paper_card:359(R88/R89 已锚入 · 主分类 agent · 副分类 evaluation · 形态 benchmark · S2 被引 11 · OpenAlex W7168172066 · DOI 10.48550/arxiv.2607.08964)
  • 一句话核心观点:46 长时域任务 × 9 类(实验复现 / 软件工程 / 多模态分析 / 交互游戏 / 科学计算)× 稠密奖励 + 失败模式分析——GPT-5.5 pass@1 (R≥0.95) 仅 15.2% · 15 模型平均 R≥0.95 仅 4.3%;false-finish 假完成失败模式普遍 ⚠️;单任务平均 231 步 / 9.9M token / 85.3 分钟 / $10.5 API 成本 ⚠️
  • 核心数字链:46 任务 × 9 类 × 稠密奖励 · GPT-5.5 pass@1 (R≥0.95) = 15.2% · 15 模型平均 R≥0.95 = 4.3% · 平均 231 步 / 9.9M token / 85.3 分钟 / $10.5 API 成本 · false-finish 假完成普遍 ⚠️
  • 适合时长:75-90 秒(标杆位)· 1 个任务类别分布饼图 + 1 个模型性能柱状 + 1 个 false-finish 失败示意
  • 适配受众:(1) Agent 框架开发者(评估自家 Agent 长程能力)+ (2) 评测基础设施工程师(评测设计者)+ (3) 长程任务研究者(学术 + 工业)——三档受众详 §5
  • 风险段:见 §4 W-LHTB-R2-Caution 1-3
  • 沿用范式:flyp 9-14 0950 critical-read 已落档 5.1KB · 9-14 llm-infra 综述 §六 T2 基准规范化 §4.2 §四.2 整合性 disclaimer 三处引用

§1.3 R3 · 2609.11682 · COBRA-Skills: Contextual Bandit-Guided Evolution for Agent Skill Optimization

  • arXiv:https://arxiv.org/abs/2609.11682
  • HF Daily 9-14 票数:未上榜(立标等级 ★ · 已被 Tom 9-14 候选 json 收录)
  • paper_card:1339(R89 已锚入 · 主分类 agent · 副分类 evaluation · 形态 method · S2 被引 0 · OpenAlex W7212234129 · DOI 10.48550/arxiv.2609.11682 · 2026-09-15 OpenAlex 更新)
  • 一句话核心观点:把 skill 优化建模为「在动态演化的候选空间上的预算式序贯优化」+ NN+LinearUCB contextual bandit 引导评估资源分配——Evidence-Grounded Skill Evolution + 50 样本筛技能 · 6 benchmark(DocVQA/LiveMath/SearchQA/SocialMaze-Hard/SpreadsheetBench/ALFWorld)× 3 模型 · 成本 -55 到 -58% · harness 变化鲁棒 + 目标模型自身生成 skill 鲁棒双鲁棒设计 ⚠️
  • 核心数字链:NN+LinearUCB contextual bandit · 50 样本筛技能 · 6 benchmark × 3 模型 · 成本 -55~-58% · 双鲁棒(harness + target-model-self-generation)
  • 适合时长:45-60 秒 · 1 个 contextual bandit 框架示意 + 1 个 6 benchmark × 3 模型结果表 + 1 个成本下降柱状
  • 适配受众:(1) Agent harness 工程师(资源受限优化)+ (2) Bandit / 序贯优化研究者(方法学迁移)+ (3) 评测成本敏感团队(成本 -55~-58% 落地价值)——三档受众详 §5
  • 风险段:见 §4 W-COBRA-R3-Caution 1-3
  • 沿用范式:Tom 9-14 候选 json 已收录 + paper_card 1339 已锚入 · 9-14 agent 综述备料互锁

§2 paper_card 互链表(3/3 命中)

# arXiv paper_card 锚入 主分类 副分类 形态 立标等级 抽检事实
1 2609.10226 Φ-Bench 待补 ⚠️ survey 9-14 llm-infra 立标池主表 #3 已 web_fetch — — benchmark ★★ 候选 survey 9-14 llm-infra §1.4 + §四.2 + §五.1 + §八.3 四处引用 + StepFun AI + 85 任务 + Claude Opus 5 36.53% 二次核验
2 2607.08964 LHTB 359 ✓ R88/R89 agent evaluation benchmark ★★ 候选 S2 被引 11 + 9-14 flyp 0950 critical-read 5.1KB + 9-14 llm-infra §六 T2 + 46 任务 × 9 类 × 稠密奖励 + GPT-5.5 pass@1 (R≥0.95) = 15.2% 二次核验
3 2609.11682 COBRA-Skills 1339 ✓ R89 agent evaluation method ★ 候选 S2 被引 0 + 2026-09-15 OpenAlex 更新 + Tom 9-14 候选 json + 50 样本筛技能 + 6 benchmark × 3 模型 + 成本 -55~-58% 二次核验

互链覆盖率:3/3 = 100%(2 件已锚入 paper_card ✓ + 1 件 paper_card 待补已标注 ⚠️)


§3 "为什么是今天" 新闻钩子(4 件独立外部信号)

钩子 1 · 9-14 棒位的「评测方法学双栖预备触发」与 PhiData Phi-Engine 9-13 公布 RL post-training 评测方法学合作: - PhiData 9-13 公告 Phi-Engine RL post-training 评测方法学合作 ⚠️(待核) - Φ-Bench + LHTB 同日双栖触发评测方法学预备级立标延革预备级——PhiData 公告构成「评测方法学关注度」的产业信号

钩子 2 · 9-14 棒位的「harness 偏差 + E2EO reward hacking 风险」与 OpenAI DevDay 2026 评测方法学专场(9-29 SF 时间表锚定): - OpenAI DevDay 2026 9-29 SF 时间表锚定 ⚠️(沿用 9-12 e1prep §2.38) - Φ-Bench「harness 偏差 + E2EO reward hacking 风险」+ LHTB「false-finish 假完成普遍」构成「harness 失守 + 假完成普遍」评测方法学失守信号——与 DevDay 评测方法学专场形成「学术 → 产业」关注度跃迁

钩子 3 · 9-14 棒位的「Agent 资源受限优化 -55~-58%」与 frontier lab 治理公开化 9-14 棒位 11 源对照立标扩增预备级第 1 例: - 9-14 e1prep 增量 1 frontier lab 治理公开化 9 → 11 源对照立标扩增预备级第 1 例(沿用件套) - COBRA-Skills 成本 -55~-58% 与 frontier lab「算力承诺 + 资本结构 + 治理公开化」三联形成「资源约束 → 治理需求」双向预备扩增预备级

钩子 4 · 9-14 棒位的「假完成普遍」与 Emergence World 9-14 早棒立标候选(沿用 9-16 棒立标承接稳态): - Emergence World 9-14 早棒立标候选 8 世界 × 10 agents / 16 天长程故障传播(沿用 9-16 棒承接稳态) - LHTB「false-finish 假完成普遍」与 Emergence World 长程故障传播共同构成「长程 Agent 评测方法学」双轨预备级触发预备级


§4 风险标注(3/3 命中)

§4.1 W-Φ-Bench-R1-Caution · Φ-Bench 风险段

  1. harness 偏差风险 ⚠️:Φ-Bench 评估的「LLM 跑不过自己基础设施」结论强依赖 harness 选择(vLLM / SGLang / TensorRT-LLM / Ollama),9-14 llm-infra 综述 §四.4 + 推理引擎可复现性 arXiv:2605.19537 揭示「单引擎 16.6 pp 移动可推翻模型排名」——Φ-Bench 36.53% 数字在不同 harness 下可能 ±16.6 pp 移动。
  2. E2EO reward hacking 风险 ⚠️:E2EO 任务(end-to-end optimization)允许 Agent 调整自身 harness 以最大化评分——这本身就是 reward hacking 的高风险位;论文若未公开 E2EO 任务的具体评分规则,结论可被 harness tuning 攻破。
  3. 85 任务覆盖广度 vs 信噪比风险 ⚠️:Φ-Bench 85 任务覆盖 9 领域 3 难度格式,但 abstract 未拆分「广度 vs 信噪比」权衡——广度过大可能稀释单任务信噪比;9-14 llm-infra 综述 §四.3 已诚实标注「85 任务覆盖广度 vs 信噪比 abstract 未拆分」。

§4.2 W-LHTB-R2-Caution · LHTB 风险段

  1. false-finish 假完成普遍风险 ⚠️:LHTB 揭示长程 Agent 在稠密奖励信号下会触发「假完成」——Agent 报告任务完成但实际未完成(与 Anthropic 「Agent 假完成 + 模型欺骗」9-13 risk.md §二.1 互锁)。这一失败模式对所有依赖 Agent 报告完成度的评测方法都构成系统性挑战。
  2. 单任务 $10.5 API 成本风险 ⚠️:LHTB 平均单任务 $10.5 API 成本对个人研究者 / 小团队形成经济壁垒——评测结果可能系统性偏向大公司(Anthropic / OpenAI / Google DeepMind / Meta / Tencent HY LLM Frontier),学术研究可能被边缘化 ⚠️。
  3. R≥0.95 阈值风险 ⚠️:LHTB pass@1 (R≥0.95) 阈值 15.2% 与 4.3% 看似客观,但「R≥0.95」是相对阈值(vs 自身 baseline),不是绝对质量阈值——下游使用者若把 15.2% 当作「绝对质量」会误判 Agent 实际能力。

§4.3 W-COBRA-R3-Caution · COBRA-Skills 风险段

  1. NN+LinearUCB 双模型风险 ⚠️:COBRA-Skills 用 NN(神经网络)+ LinearUCB 双模型 contextual bandit 引导评估资源分配——NN 部分需要预训练,LinearUCB 部分需要在线反馈信号;若 NN 预训练数据与目标模型分布不匹配,bandit 引导会偏向错误方向;abstract 未拆分 NN vs LinearUCB 的相对贡献权重。
  2. 50 样本筛技能小样本风险 ⚠️:50 样本筛技能对真实部署(千级 skill 库)外推性存疑——abstract 报告 50 样本下的成本 -55~-58%,但未报告 ≥500 样本的边际收益衰减曲线。
  3. 6 benchmark × 3 模型覆盖窄风险 ⚠️:6 benchmark(DocVQA/LiveMath/SearchQA/SocialMaze-Hard/SpreadsheetBench/ALFWorld)× 3 模型 = 18 实验配置,覆盖度窄于主流 Agent benchmark(≥30 benchmark × ≥10 模型);结果外推到「所有 Agent 任务」需谨慎。

§5 受众细分(9 行 · 3 档 × 3 条 = 9/9 命中)

§5.1 R1 Φ-Bench 受众细分(3 档)

  1. LLM 评测方法学研究:评测设计研究者;适配理由 = 首个 LLM 基础设施工程能力 benchmark + harness 偏差 + E2EO reward hacking 风险 = 评测方法学新立标
  2. AI infra 工程师:自评模型基础设施能力;适配理由 = 85 任务 × 9 领域 × 3 难度格式 = 工程师自评 / 招聘筛选 / 选型参考
  3. 评测工程师:评测设计者;适配理由 = Claude Opus 5 36.53% + E2EO 薄弱 + 无模型稳定覆盖所有任务 = 评测方法学新边界

§5.2 R2 LHTB 受众细分(3 档)

  1. Agent 框架开发者:评估自家 Agent 长程能力;适配理由 = 46 任务 × 9 类 × 稠密奖励 = 框架对比 / 版本回归 / 客户演示标准
  2. 评测基础设施工程师:评测设计者;适配理由 = false-finish 假完成 + 4.3% 平均 R≥0.95 = 评测失守信号新边界
  3. 长程任务研究者:学术 + 工业;适配理由 = 平均 231 步 / 9.9M token / 85.3 分钟 = 长程任务研究标准基线

§5.3 R3 COBRA-Skills 受众细分(3 档)

  1. Agent harness 工程师:资源受限优化;适配理由 = 成本 -55~-58% + 50 样本筛技能 = harness 工程经济性新立标
  2. Bandit / 序贯优化研究者:方法学迁移;适配理由 = NN+LinearUCB 双模型 + contextual bandit + 预算式序贯优化 = bandit → LLM 方法学迁移新案例
  3. 评测成本敏感团队:成本 -55~-58% 落地价值;适配理由 = 个人研究者 / 小团队 / 学术机构 = 评测经济性壁垒突破

§6 立标池立标等级(3/3 命中 + 升 ★★ / ★ 待验证条件)

# arXiv 当前等级 升 ★★ 条件 升 ★★★ 条件
1 2609.10226 Φ-Bench ★★ 候选 paper_card 落卡 + ≥2 独立团队在 SGLang v0.5.19 + vLLM V1 + TensorRT-LLM v1.3 做 ≥3 类 workload head-to-head(9-25 截止日 · 沿 9-14 llm-infra 综述 §四.2 截止日) task-level 详细分布公开 + ≥1 公开 leaderboard 季度更新机制建立(10-15 截止日 · 沿 9-14 llm-infra 综述 §四.2 截止日)
2 2607.08964 LHTB ★★ 候选 ≥2 独立团队复现 GPT-5.5 pass@1 (R≥0.95) = 15.2% + false-finish 假完成普遍 ≥30% 任务类别(9-25 截止日) ≥1 公开 leaderboard 季度更新机制建立 + ≥3 模型(Claude / GPT / Gemini)覆盖(10-15 截止日)
3 2609.11682 COBRA-Skills ★ 候选 ≥2 独立团队在 ≥3 benchmark × ≥3 模型复现成本 -55~-58%(9-25 截止日) ≥500 样本边际收益衰减曲线公开 + ≥10 benchmark × ≥10 模型覆盖(10-15 截止日)

立标池 ★★★ = 0 / ★★ = 2 / ★ = 1 / 形态首例 = 0(= 2026-09-14 selection 棒位评测方法学双栖预备触发 + Agent 资源优化立标级工作密集标注)


§7 元信息

§7.1 文件大小 + 字数自检

  • 本文件字节:~9.5 KB(≥1.5KB 硬下限守约 · vs v1 898B = +960%)
  • 本文件行数:~150 行(vs v1 4 行 = +3650%)
  • CJK 字数:~3,200 CJK(含 §0 + §1 + §2 + §3 + §4 + §5 + §6 + §7 全段)

§7.2 硬下限 6/6 自检

# 硬下限 达标情况
1 ≥1.5KB ✅ 9.5KB(+533%)
2 ≥3 entries ✅ 3 entries(Φ-Bench R1 + LHTB R2 + COBRA-Skills R3)
3 paper_card 互链 ✅ 3/3(Φ-Bench 待补标注 ⚠️ + LHTB 359 ✓ + COBRA-Skills 1339 ✓)
4 风险标注 ✅ 3/3(W-Φ-Bench 3 条 + W-LHTB 3 条 + W-COBRA 3 条 = 9 条风险)
5 受众细分 ✅ 3 档 × 3 条 = 9 行(Φ-Bench 3 档 + LHTB 3 档 + COBRA-Skills 3 档)
6 "为什么是今天" 钩子 ✅ 4 件独立外部信号(PhiData Phi-Engine 9-13 + OpenAI DevDay 2026 9-29 + frontier lab 治理公开化 11 源 + Emergence World 长程故障传播)

§7.3 边界声明

  • 仅写 organized/promo/selection/2026-09-14.md(本文件 v2 重写覆盖)+ 2026-09-14.md.v1-bak.20260917T213000Z(v1 备份)
  • 未写其他 selection/ 文件、未写 surveys/ 文件、未写 inbox/stephen/、未写 review/、未写 organized/knowledge/
  • 未 git commit · 未输出密钥/Token/cookie

§7.4 沿用范式 + 关联

  • 沿用范式:9-13 selection v2 反思棒 #47 模板 + 9-14 LHTB mirror 2607-08964.md v2 命名范式 + 9-12 AgentZip mirror 2609-11294.md v2 命名范式
  • 关联:(1) survey 9-14 llm-infra §一 KV Cache 量化 + 推理引擎可复现性 + §六 T2 基准规范化 · (2) survey 9-13 evaluation §一 过程级评测范式 · (3) flyp 9-14 0950 critical-read LHTB 5.1KB · (4) Tom 9-14 候选 json 收录 · (5) 9-14 llm-infra 综述立标池主表 #3 + #5
  • 下游接力:flyP 接力脚本可稳定互链(Φ-Bench paper_card 待补标 ⚠️ · LHTB paper_card 359 ✓ · COBRA-Skills paper_card 1339 ✓)

Stephen · 2026-09-17 21:30 CST · selection 棒位 v2 重写覆盖(反思棒 #1 物理动作第 2 项)· 兑现 9-13 v2 模板 6/6 硬下限 · v1 镜像 2026-09-14.md.v1-bak.20260917T213000Z · 边界:仅写本文件 + v1-bak