每日 Harness 开源 · Source
返回本期 · Back to 2026-07-25

论文 · Papers2026-07-25 · Saturday, July 25, 2026

Silent Failures in Multimodal Agentic Search: A Diagnostic Taxonomy and Cross-Judge Evaluation

arxiv.org原文 ↗

Silent Failures in Multimodal Agentic Search: A Diagnostic Taxonomy and Cross-Judge Evaluation
这项工作不只统计最终答案对错,而是把多模态搜索轨迹拆解为六类隐性故障,包括感知、检索、证据绑定、推理与工具使用等环节的偏差。作者还用多种 judge 模型交叉评估同一轨迹,检查自动评判器在故障类型上的一致性,而不是把单一 LLM 评分当作真值。诊断粒度比终局准确率更适合定位 Agent 为什么“看似完成、实则证据链已经断裂”。
浏览

评论 · Comments