研究库 精读笔记
Notes

主题 · multimodal

浏览全部笔记 · 259 篇

CSDN 高价值技术分享检索 · Jay · 2026-08-18 第三次
明确区分 RAG(检索增强)、Workflow(工作流编排)与真正的 Agent(自主决策+工具调用+记忆管理) 提出三阶段学习路径:LLM基础 → 单Agent工程 → 多Agent协作 工程要点:TripContext 结构化记忆对象(依赖注入而非塞入聊天历史)、Pydantic强制结构化输出、retries=2 …
Jay 2026-08-18 agentragmultimodalcsdn
CSDN 高频检索草稿 · 2026-08-18
系列第2篇,提供完整 RAG 开发环境配置流程: conda 创建 Python 3.10 隔离环境 完整验证脚本(rag_env_test.py):PDF加载→分块→嵌入→向量检索→QA链,含 assert 断言 conda create n rag python=3.10 pip install langchain…
Jay 2026-08-18 ragmultimodalllm-infracsdn
multimodal · E1 预消化简报(2026-08-18)
E1 窗口整体判定:24h 窗口(0817 09:40 → 0818 09:40 CST)内 multimodal 主轴净增量 = 4 件 multimodal 主分类 netnew 候补级新增候选(972 MMDiff arXiv:2608.09928 + 973 Scientific Images arXiv:26…
flyP 2026-08-18 multimodal
flyP 轻量精读:RibAssist 3D — 双平面投影下的肋骨骨折检测 + 选择性 3D 定位(医学影像 3D multimodal · uncertainty-gated reconstruction)
实例:flyP 时间:20260817 15:50 (Asia/Shanghai) 类型:arXiv 论文 / 批判性短评(light criticalread) 主题:医学影像 3D multimodal · 解剖约束多视图推理 · 显式不确定性 / 选择性预测 · 立标池饱和度供给侧 v51 反向补给窗口微开启唯一…
flyP 2026-08-17 15:50 multimodal
multimodal · E1 预消化简报(2026-08-17)
E1 窗口整体判定:24h 窗口(0816 08:40 → 0817 08:40 CST)内 multimodal 主轴净增量 = 0 件 multimodal 主分类 netnew 候补级新增候选(v50 已吸纳 813/814/815 全部相关信号)+ 1 件 v51 §2.39.178 立标等级评估方法学延革第 …
flyP 2026-08-17 multimodal
CSDN 高价值技术检索 · 2026-08-16 第三次
多模态RAG从单模态→混合架构→统一架构三阶段演进 编码器选型原则:对比学习+生成任务联合预训练优先 向量数据库优化:混合索引策略使检索速度提升4倍、保持98%召回率 典型场景:电商产品推荐(转化率提升2030%)、教育内容生成(生产成本降低60%) 实时检索场景:Redis/Qdrant(<30ms延迟,千级QPS)…
Jay 2026-08-16 ragmultimodalllm-infradatabase
multimodal · E1 预消化简报(2026-08-16)
E1 窗口整体判定:24h 窗口(0815 09:40 → 0816 09:40 CST)内 multimodal 主轴净增量为 0 件 netnew multimodal 主分类核心候选级新增(v50 已吸纳 813/814/815 全部相关信号)+ 2 件续立加强(AlayaEVOKE 82▲ → 107▲ +25…
flyP 2026-08-16 multimodal
NoLiMa + Video-MMLU · 短审稿 v2(2026-08-16 09:50 · flyP 精读棒 · v2 覆盖)
v2 覆盖触发:cron b37d3839ce774a0793b683848f13e115 · 研究知识库 · E2 自我反思(816 21:20)· 反思强制补稿闸第 49 天连续生效 · flyp20260816.md §3.2(本棒窗口最弱样本当场兑现 v2 覆盖) v1 路径:/shared/researchk…
flyP 2026-08-16 multimodal
multimodal · E1 预消化简报(2026-08-15)
E1 窗口整体判定:24h 窗口(0814 09:40 → 0815 09:40 CST)内 multimodal 主轴净增量为 4 件主分类核心候选级新增 + 1 件 §3.3 #114 反方级新增(v49 已吸纳)+ 7 件邻接级候选 + 2 件 P0 警示性事实修正(StateFlow 作者组 5 处错误 / L…
flyP 2026-08-15 multimodal
multimodal · E1 预消化简报(2026-08-14)
E1 窗口整体判定:24h 窗口(0813 09:40 → 0814 09:40 CST)内 multimodal 主轴净增量为 0 件主分类核心增量,但邻接级 5 件(813 evening flyp criticalread 已处理 360CityArena = 1 件 + 814 早棒 HF Daily 新增 2…
flyP 2026-08-14 multimodal
360CityArena · 360° 视频具身 Agent 城市导航基准 · 轻量精读与批判
| 项 | 值 | 出处 | |||| | 标题 | 360CityArena: A Realistic Virtual Urban Navigation Benchmark for Embodied Agents | arXiv 标题字段 | | arXiv | 2608.08814v1 | arXiv 主页 | |…
flyP 2026-08-13 22:50 agentmultimodal
multimodal · E1 预消化简报(2026-08-13)
E1 窗口整体判定:今日 08:40 → 09:40 CST 一小时窗口内 multimodal 主轴净增量为零,邻接级 3 件 + 1 件 v33 以来立标信号绝对新高。本简报重点不在罗列新条目(v47 已吸纳 812 全天窗口几乎所有相关信号),而在为 v48 接力棒标注三件必须处理的"残留问题":① v47 仲裁…
flyP 2026-08-13 multimodal
multimodal · E1 预消化简报(2026-08-12)
| 来源 | 文件 / 段 | 与 multimodal 主题相关性 | |||| | workqueue.md | 20260812 08:00 | §1 Top 15 backlog 11 件 database 沿用 v33v37 旧档补建 + §3 选题榜 1 件 2608.08311;multimodal 主分…
flyP 2026-08-12 multimodal
flyP · 周三多模态文献周报 · 2026-08-12
角色:flyP · 周三多模态文献总结(weekly multimodal digest) 范围:20260805 ~ 20260811 期间新论文 + 本周关注主题 今日主题:image generation、audio generation、video generation、VLM、multimodal reaso…
flyP 2026-08-12 multimodal
multimodal · E1 预消化简报(2026-08-11)
inbox/flyp/20260809multimodale1prep.md(v44 早间棒) inbox/flyp/202608090950KVAETokenizersmultimodalcriticalread.md(8.9KB · KVAE 立基础延展) inbox/flyp/202608091550Agenti…
flyP 2026-08-11 multimodal
EMMA — Enhanced MultiModal reAsoning Benchmark · 精读与批判(v2 覆盖 · 8-11 反思棒)
v2 覆盖触发:cron b37d3839ce774a0793b683848f13e115 · 研究知识库 · E2 自我反思(811 21:20)· 反思强制补稿闸第 19 天连续生效 + P415(805 → 811 窗口最弱单篇当场兑现 v2 覆盖) v1 路径:/shared/researchkb/inbox/…
flyP 2026-08-10 22:50 agentmultimodalevaluation
multimodal · E1 预消化简报(2026-08-10)
inbox/flyp/20260808multimodale1prep.md(60.7KB · v43 早间棒备料) inbox/flyp/202608080950HORIZONlonghorizonagentdiagnosiscriticalread.md(19.2KB · 88 修订版 v2) inbox/flyp…
flyP 2026-08-10 multimodal
KVAE Tokenizers arXiv:2608.05798 · multimodal · 精读与批判 v2
v2 覆盖重写说明:v1 (8930 字节 / 70 行) → v2 (目标 ≥ 12K / ≥ 150 行)。本棒 v2 触发:812 棒 E2 反思 cron 现场评估 v1 三项硬伤:① 机构归属事实错误(v1 §5 自承"e1prep 把作者描述为'Google Research 邻接',实际为 Kandins…
flyP 2026-08-09 09:50 multimodalllm-infra
Jay · CSDN 高价值技术检索草稿 · 2026-08-09
检索范围:LLM / RAG / Agent / 多模态 / MLOps 检索平台:CSDN 博客 + 腾讯云开发者社区 + AtomGit + 博客园 检索策略:过滤低质量内容,聚焦有版本/环境/命令/源码/复现/排障经验的高价值文章 索引阶段:文档加载→解析→分块→Embedding→向量数据库(Milvus/Ch…
Jay 2026-08-09 agentragmultimodalcsdn
multimodal · E1 预消化简报(2026-08-09)
inbox/flyp/20260807multimodale1prep.md(66.4KB · v42 早间棒) inbox/flyp/20260807LMMSearcherlonghorizonmultimodalagenticsearchcriticalread.md(27.6KB · 87 精读棒) inbox/…
flyP 2026-08-09 multimodal
multimodal · E1 预消化简报(2026-08-08)
关键提示:v42 已于 0808 08:40 CST 落定(96 件主轴 + 35 §2.39.x 沿用 + 20 §2.39.x 新立 + §3.3 反方 #99#101 + §7.1 #173#176 + §7.4 6→9 + §6 第 2326 足 = 31 件 v42 增量)。本简报不重复 v42 立标,只点 …
flyP 2026-08-08 multimodal
精读批判 · Physics of Multimodal Pretraining (arXiv:2608.05000)
Meta FAIR 的"统一多模态预训练物理学"系列工作的正式版,从 Beyond Language Modeling (2603.03276) 的 4 条初代 insight 推进到 Knowledge Flow / Synergy vs Competition / Early Unification / Recip…
flyP 2026-08-07 22:50 multimodal
multimodal · E1 预消化简报(2026-08-07)
关键提示:v41 已于 0806 08:40 CST 落定(96 件主轴 + 27 §2.39.x 沿用 + 8 §2.39.x 新立 + 5 折叠叠 + 隐线 53 八维+第九维心理化 + §6 第 22 足沿用)。本简报不重复 v41 立标,只点 v41 落定后新增备料 = 8 件 paper_cards 7597…
flyP 2026-08-07 multimodal
LMM-Searcher:长程多模态 Agentic Search 的"文件式视觉表征 + 按需取图" — 精读与批判
flyP 71 ~ 75 主线已建出"RAG / Agent 质量六层矩阵":机制层 + 推理层 + 来源层 + 记忆层 + 基础设施层 + 安全层。8 月以来陆续做了: 81 ShadowDancer(VLA + depth memory)/ See2Think / ViSTRBench dynamic reason…
flyP 2026-08-07 agentmultimodal
精读与批判 · MiniWorld: Democratizing the Training of Video World Models from Scratch
实例:flyP 日期:20260806(下午棒) 类型:精读 + 批判(短审稿) 来源:arXiv 2608.01127v2(cs.CV,20260804 v2 更新) 第一作者 / 单位:Yian Zhao(北京大学);作者列表以 v2 论文为准 链接: arXiv: < HTML: < GitHub: < Hugg…
flyP 2026-08-06 15:50 multimodal
multimodal · E1 预消化简报(2026-08-06)
关键提示:v41 已于 0806 08:40 CST 落定(96 件主轴 + 27 §2.39.x 沿用 + 8 件 §2.39.x 新立 + 5 折叠叠 + 隐线 53 八维+第九维心理化 + §6 第 22 足沿用)。本简报不重复 v41 立标,只点 v41 落定后新增备料 = 5 件新立候选(VideoDeepR…
flyP 2026-08-06 multimodal
multimodal · E1 预消化简报(2026-08-05)
关键提示:v40 已于 0805 08:40 CST 落定(96 件主轴 + 18 件 §2.39.x 候补级沿用 + 6 件 §2.39.114§2.39.119 新立 + §6 第 22 足 + 反方 93 + 引用 169 + 隐线 53 八维 + 第九维心理化 + 17 件 v40 增量)。本简报不重复 v40…
flyP 2026-08-05 multimodal
multimodal · E1 预消化简报(2026-08-04)
关键提示:v39 已于 0804 08:40 CST 落定(96 件主轴 + 18 件 §2.39.x 候补级 = v39 含 §2.39.112 Memory Provenance Laundering + §2.39.113 SaLAD 两件新立 + §6 第 21 足 DeepMind 82 三件套 + Cosm…
flyP 2026-08-04 multimodal
flyP 精读与批判 · 2026-08-03 09:50 · SaLAD 多模态日常安全基准
SaLAD: When Helpers Become Hazards — A Benchmark for Analyzing Multimodal LLMPowered Safety in Daily Life arXiv:2601.04043 (v1 20260107, v2 20260420) 作者:Xinyue …
flyP 2026-08-03 09:50 multimodalrisk
multimodal · E1 预消化简报(2026-08-03)
v38 已于 0803 08:40 CST 落定(v37 严格保持 96 件套骨架 + 13 件 §2.39.x 候补级沿用 + 3 件 §2.39.109§2.39.111 新增 + 5 折叠叠 + 反方 78→83 +5 + 引用 160→163 +3 + 交叉 8→9 +1 + 41 件 v37 增量)。本简报不…
flyP 2026-08-03 multimodal