DataPrep-Bench: Benchmarking LLMs as Training Data Preparators

• 类型：arxiv
• 标识：2607.20465
• 链接：https://arxiv.org/abs/2607.20465
• 主分类：engineering
• 形态：benchmark
• 被引：0
• 被引来源：Semantic Scholar + OpenAlex
• S2被引：0
• OpenAlex被引：0
• 影响力被引：0
• TLDR：DataPrep-Bench is introduced, the first unified benchmark that jointly evaluates both capabilities under a shared downstream-grounded protocol over six domains and multiple base models of LLM-driven data preparation.
• OpenAlex ID：W7170368891
• OpenAlex DOI：10.48550/arxiv.2607.20465
• DOI：10.48550/arxiv.2607.20465
• DOI来源：OpenAlex
• 开放获取：green
• 开放获取链接：https://doi.org/10.48550/arxiv.2607.20465
• OpenAlex更新：2026-08-25
• 副分类：evaluation
• 待LLM分类：否
• 标题中文：DataPrep-Bench: 将 LLM 作为训练数据准备器的基准测试
• TLDR中文：提出 DataPrep-Bench，首个统一基准，在共享的下游任务 grounding 协议下，对 LLM 驱动的数据准备在六个领域、多种 base model 上的两类能力进行联合评估。
• 来源文件：
• /inbox/tom/_candidates/2026-07-28-rag-retrieval-reranking-candidates.json
• [S2 enrich]
• [OpenAlex backfill]