固定模型与 OpenRouter 供应商路由,关闭 fallback,用 Ventor QTest Average Fidelity Loss 比较部署输出与参考分布的差异。AFL 越低越接近参考。
正在加载静态测试结果…
测试模型
5
测试模型
5供应商保真度
没有匹配的供应商。
方法与成本
使用 12 个预先固定的有限类别上下文。Qwen 每条路由采样 600 次,其余模型每条路由采样 120 次;参考侧返回首 token 概率,目标侧文本按精确匹配映射到类别,再计算有限样本偏差校正后的 coarsened-KL 均值与 95% 可信区间。
这是部署保真度测试,不是综合能力榜单。榜单只展示 OpenRouter 供应商端点;成功率低于 95% 的 endpoint 不参与排名。有限样本偏差校正可能产生接近 0 的小幅负值。成本合计仅包含按端点单价估算的 OpenRouter 消耗。
查看方法源码 ↗