Ambition
L’annonce de lancement est le seul tableau de scores qu’un labo choisit lui-même. L’Ambition Score note ce choix : le modèle affronte-t-il des tests difficiles, des rivaux actuels de sa catégorie et des benchmarks conçus par d’autres ? Un score bas signifie que le labo a joué la sécurité. Pour le niveau réel des modèles, voir le Fu Ranking.
Par labo
Ambition Score moyen des lancements affichés| # | Modèle | Ambition | Tests difficiles | Rivaux actuels | Catégorie de poids | Tests indépendants | Fu |
|---|
Comment fonctionne l’Ambition Score
Pour chaque lancement, nous prenons le tableau ou graphique de benchmarks principal de l’annonce officielle ou de la fiche du modèle : les benchmarks affichés et les modèles auxquels le nouveau est comparé. Chaque critère est évalué selon l’état de la base à la date du lancement et noté de 0 à 100.
Tests difficiles : pour chaque benchmark (scores en pourcentage uniquement), le niveau du peloton : le meilleur score du deuxième meilleur labo parmi les modèles de sa catégorie de poids au lancement, nouveau modèle compris. Un test saturé était difficile et ne l’est plus : le peloton a rattrapé son retard, l’avance d’un seul labo ne le sature pas. Un test ne compte qu’une fois qu’au moins 5 modèles de 3 autres labos avaient des résultats avant le lancement (un test tout neuf n’a pas encore de meilleur score) ; pour un modèle de taille publiée, la catégorie va jusqu’à quatre fois sa taille. Un test dont le niveau du peloton est à 90 % ou plus compte 0, à 50 % ou moins compte 1, linéaire entre les deux ; le critère est la moyenne de la moitié la plus difficile des tests affichés, des tests faciles à côté de tests difficiles ne coûtent donc rien. Rivaux actuels : un rival d’un mois au plus compte 1, un rival de douze mois ou plus compte 0. Catégorie de poids : un rival à poids ouverts d’un modèle à poids ouverts compte 1 s’il a au moins autant de paramètres, 0 s’il fait un quart de la taille ou moins. Les autres rivaux sont comparés par Fu Score (meilleure variante) à une barre : le Fu Score du nouveau modèle ou, s’il est plus bas, celui du meilleur modèle du deuxième labo le plus fort à ce moment. Un rival au niveau de la barre compte 1, un rival 6 points ou plus en dessous compte 0. Tests indépendants : part des benchmarks non créés par le labo ; les évaluations internes comptent comme maison.
Les rivaux sont les modèles comparés d’autres labos. Les anciens modèles du labo montrent un progrès, pas un combat, et ses modèles du même lancement sont des frères ; aucun n’est noté. Une annonce sans rival d’un autre labo obtient 0 en rivaux actuels ; la catégorie de poids n’est alors pas notée. L’Ambition Score est la moyenne pondérée des critères évaluables : les tests difficiles comptent triple, les rivaux actuels et la catégorie de poids une fois, les tests indépendants pour moitié ; il en faut au moins trois, dont les tests difficiles. Les modèles avec trop peu de scores pour le classement Fu reçoivent un Fu Score estimé, marqué d’un *.