所有基准测试

模型路由基准测试

比较模型路由器、复合模型及其他类型的多模型切换逻辑的性能。

Auto Router 现由 Jev Router 驱动。 了解其工作原理 →
路由器
nvidia 的网站图标
openrouter 的网站图标
sakana 的网站图标
unbiased 的网站图标
6 个路由器
Auto、Fugu Max、Pareto、Auto Code和Fugu Ultra v2 加上 Switchyard 模型切换
模型
anthropic 的网站图标
deepseek 的网站图标
google 的网站图标
moonshotai 的网站图标
21 个模型
仅限路由和基线模型;路由器模型选项不可用
结果
176
已发布的路由器和基准运行

上次基准测试运行

模型路由前沿

默认情况下,每个点表示模型路由器在各项基准测试中的平均质量。与矩阵中的模型路由指数不同,成本和速度仍显示在横轴上,而不计入质量。选择一项基准测试以比较该测试中的质量,或更改横轴衡量的指标。

质量前沿

每个评估任务的已记录成本,采用对数刻度。 质量评分是在各项基准测试中相对于最佳路由器的准确率(0–10),再对各项基准测试取平均值。优于所有路由器的基线最高计为 10 分。 空心点表示单个模型的基线,仅供参考。 得分低于坐标轴范围的基线不予显示;它们仍保留在结果表中。

基准测试矩阵

模型路由指数综合质量、速度和成本,相对于各项基准测试的最佳结果给出 0–10 分的评分。 探索模型路由前沿.

更好更差单模型基线仅供参考,不参与排名。

模型路由结果