Verification-Aware Training for Speculative Decoding

• 类型：arxiv
• 标识：2608.30135
• 链接：https://arxiv.org/abs/2608.30135
• 主分类：engineering
• 形态：position
• 被引：5
• 被引来源：Semantic Scholar
• S2被引：5
• OpenAlex被引：0
• 影响力被引：1
• TLDR：Verification-Aware Training is introduced, a plug-in framework that simulates verification at every training step and turns the resulting accept and reject patterns into supervision and improves average acceptance length and wall-clock speedup across math, code, and chat benchmarks.
• OpenAlex ID：W7204895662
• OpenAlex DOI：10.48550/arxiv.2608.30135
• DOI：10.48550/arxiv.2608.30135
• DOI来源：OpenAlex
• 开放获取：green
• 开放获取链接：https://arxiv.org/pdf/2608.30135
• OpenAlex更新：2026-09-04
• 待LLM分类：否
• 标题中文：面向 Speculative Decoding 的验证感知训练
• TLDR中文：提出 Verification-Aware Training，一种插件式框架，在每一步训练中模拟验证并将产生的 accept 与 reject 模式转化为监督信号，在数学、代码和聊天基准上提升了平均接受长度和实际加速比。
• 来源文件：
• /inbox/tom/_candidates/2026-09-01-agent-rag-longcontext-candidates.json
• [S2 enrich]
• [OpenAlex backfill]