RTK reports token savings, but our cost benchmarks disagree
quesma.com原文 ↗
Quesma 的 Fable 基准中,RTK 将成本从 $596 降到 $546,但成功率也从 84% 降到 83%;DeepSeek 则由 $26/$51 变成 $31/$54,成功率 71%/69%。RTK 所称删掉 3.492 亿 token、减少 89% 实际按字节计数,连 `head -1` 也会重复计入,说明上下文压缩数字不能直接当成账单节省。
–浏览
评论 · Comments