Tom 文献雷达 · Agent / RAG / 长上下文 · 2026-08-17 20:40 UTC

候选摘要(8 条)

# 来源 标题 标签 价值
1 arXiv How Much Do Legal RAG Systems Still Hallucinate? rag, benchmark ⭐⭐⭐
2 HF Daily SimpleOPD: Simple Tokenizer-Agnostic On-Policy Distillation for Long-Context Reasoning long-context ⭐⭐⭐
3 HF Daily UniProbe: Token-Level Hallucination Detector for Large VLMs multimodal ⭐⭐
4 HF Daily UNMASK: Discovering and Causally Verifying Spurious Shortcuts in Text Classifiers benchmark ⭐⭐
5 HF Daily Self-Supervised Visual On-Policy Distillation multimodal
6 HF Daily DFM Mimir v1: Open HRM 1B with Permissible Data research
7 HF Daily LittleLearner: Language Models Under Pedagogically Controlled Knowledge Exposure benchmark
8 HF Daily ALD/E-ImageMiner: Scientific Figure Understanding Benchmark benchmark, multimodal

⭐⭐⭐ 高价值条目

  • arXiv: http://arxiv.org/abs/2608.14210v1
  • 作者: Souvick Das, Sallam Abualhaija, Domenico Bianculli
  • 发表: 2026-08-14
  • 核心: 对 8 个法律 RAG 系统在 GDPR(英语)和法国国民法(法语)两个语料库上进行细粒度幻觉分析。 claim 级 + 答案级评估,覆盖问题类别和用户角色,并在 142 条法律专家撰写的问题上验证。
  • 意义: 法律 RAG 是高风险场景,幻觉密度和严重性数据对 RAG 评测体系有直接参考价值。

2. SimpleOPD: Simple Tokenizer-Agnostic On-Policy Distillation for Long-Context Reasoning

  • arXiv: https://arxiv.org/abs/2608.14277
  • 发表: 2026-08-13,HF 日票 17
  • 核心: 针对"长上下文 teacher → 短上下文 student"的 OPD 挑战,在共享文本空间做 token 级对齐,解决 tokenizer 不匹配、分布不匹配、响应长度爆炸和训练不稳定问题。将证明推理能力从 SU-01(长上下文)迁移到短上下文模型。
  • 意义: 长上下文推理能力蒸馏是 Agent 落地的重要方向,tokenizer 无关方案降低部署门槛。

3. UniProbe: Token-Level Hallucination Detector for Large VLMs

  • arXiv: https://arxiv.org/abs/2608.10835
  • 发表: 2026-08-11,HF 日票 3
  • 核心: 轻量级、可学习的 token 级幻觉检测器,建模冻结 VLM 的多结构内部表征(空间、序列、关系),无需全模型微调。
  • 意义: 幻觉定位能力对 RAG 可信度评估有迁移价值,token 级干预思路可用于 RAG 输出校验。

4. UNMASK: Discovering and Causally Verifying Spurious Shortcuts in Text Classifiers

  • arXiv: https://arxiv.org/abs/2608.09209
  • 发表: 2026-08-09
  • 核心: 全自动发现、因果验证并缓解文本分类器中依赖表层伪相关(spurious correlation)的流水线,无需额外人工标注。
  • 意义: RAG 系统中检索与生成之间的伪相关问题(如表面词 overlap 而非真实语义匹配)可类比此框架,评测设计值得关注。

趋势洞察

  • 幻觉评测走向细粒化:从答案级向 claim/token 级渗透,法律、医疗等高风险垂直 RAG 是当前评测热点。
  • 长上下文蒸馏实用化:SimpleOPD 这类 tokenizer 无关方案意味着未来轻量 Agent 也能调用远程强模型的长上下文能力。
  • Agent 评测基准多元化:传统 accuracy 逐步加入因果性、幻觉密度、用户角色维度。

来源: arXiv metadata + HuggingFace Daily | Substack: 未纳入(搜索结果质量不足)| CSDN: 未使用