Tous les tests de référence

Évaluations du routage des modèles

Comparez les performances des routeurs de modèles, des modèles composites et d’autres types de logique de basculement entre plusieurs modèles.

Auto Router repose désormais sur Jev Router. Découvrez son fonctionnement →
Routeurs
Favicon de nvidia
Favicon de openrouter
Favicon de sakana
Favicon de unbiased
6 routeurs
Auto, Fugu Max, Pareto, Auto Code et Fugu Ultra v2 plus le changement de modèle Switchyard
Modèles
Favicon de anthropic
Favicon de deepseek
Favicon de google
Favicon de moonshotai
21 modèles
Modèles de routage et de référence uniquement ; les choix de modèles du routeur ne sont pas disponibles
Résultats
176
exécutions publiées du routeur et de référence

Dernière exécution de l’évaluation comparative

Frontière du routage des modèles

Par défaut, chaque point représente la qualité d’un routeur de modèles, moyennée sur les tests de performance. Le coût et la vitesse restent sur l’axe horizontal au lieu d’être intégrés à la qualité, contrairement à l’indice de routage des modèles de la matrice. Choisissez un test de performance pour comparer la qualité sur ce test, ou modifiez ce que mesure l’axe horizontal.

Frontière de qualité

Coût enregistré par tâche évaluée, échelle logarithmique. Le score de qualité correspond à la précision relative au meilleur routeur pour chaque test de performance (0–10), moyennée sur les tests de performance. Une référence qui surpasse tous les routeurs est plafonnée à 10. Les points creux représentent les résultats de référence de modèles individuels, affichés à titre de comparaison. Les références dont le score est inférieur à l’axe ne sont pas affichées ; elles figurent toujours dans le tableau des résultats.

Matrice des évaluations comparatives

L’indice de routage des modèles combine la qualité, la vitesse et le coût en un score de 0 à 10 relatif aux meilleurs résultats de chaque test de performance. Explorer la frontière du routage des modèles.

MeilleurMoins bonLes références à modèle unique sont affichées à titre indicatif et ne sont pas classées.

Résultats du routage des modèles