Eta Given Delta: Defining LLM Tool Efficiency With Marginal Tool Utility
arxiv.org原文 ↗
这篇定义 marginal tool utility,用来判断单次工具调用是否对最终答案有必要,再由此计算 tool efficiency。它关心的是轨迹内部的有效调用率,而不是只看任务最终是否通过。这个度量适合分析 agent 为何会“忙而无效”,尤其是长链搜索、重复查询和无贡献工具调用。
–浏览
评论 · Comments