Decision Index
Classement Artificial Analysis des modèles décisionnels, qui choisissent parmi des options et en donnent les probabilités, face à des LLM qui répondent en JSON : classification, appel d'outils, connaissances, hallucinations et raisonnement.
En bref
Claude Opus 5.5 (Max, Default Fallback) est en tête avec 79,0, sur 36 résultats. Meilleur rapport score/coût : Elephant 9B, 64,7 pour 0,00000839 $ par tâche. Le plus rapide : d1-ultra, 0,093 s par tâche.
Rapport et vitesse sont choisis parmi les 18 premiers, pour qu'un essai bon marché ou rapide mais faible ne l'emporte pas. Données relevées le 4 nov. 2026.
- Configurations
- 36
- Meilleur index
- 79,0
- Claude Opus 5.5 (Max, Default Fallback)
- Meilleur modèle décisionnel
- 65,2
- d1-ultra
- Plus rapide
- 0,063 s
- Celeris-1 Decision · 52,3
Index selon le coût ou la durée
Un point par configuration mesurée. L'axe horizontal est inversé : en haut à droite, un modèle obtient un meilleur index pour moins cher ou plus vite.
Modèles affichés8 sur 36
Les meilleurs modèles sont affichés par défaut. Survolez un modèle pour le mettre en avant ; les axes s'ajustent aux modèles affichés.
36 / 36 configurations
- Précision
- 93,4
- Non-halluc.
- 30,3
- HLE
- 70,2
- When2Call
- 90,5
- WildGuard
- 93,5
- Coût / 1 M tâches
- 51 294,90 $
- Durée / tâche
- 3,57 s
- Précision
- 93,4
- Non-halluc.
- 27,3
- HLE
- 59,8
- When2Call
- 88,1
- WildGuard
- 93,5
- Coût / 1 M tâches
- 6 688,16 $
- Durée / tâche
- 1,87 s
- Précision
- 93,0
- Non-halluc.
- 22,9
- HLE
- 55,4
- When2Call
- 80,6
- WildGuard
- 92,0
- Coût / 1 M tâches
- 2 048,35 $
- Durée / tâche
- 2,89 s
- Précision
- 91,0
- Non-halluc.
- 11,1
- HLE
- 58,9
- When2Call
- 81,2
- WildGuard
- 92,5
- Coût / 1 M tâches
- 6 322,89 $
- Durée / tâche
- 4,43 s
- Précision
- 57,6
- Non-halluc.
- 69,3
- HLE
- 37,4
- When2Call
- 79,4
- WildGuard
- 93,2
- Coût / 1 M tâches
- 2 073,24 $
- Durée / tâche
- 2,66 s
- Précision
- 31,6
- Non-halluc.
- 84,5
- HLE
- 15,0
- When2Call
- 92,6
- WildGuard
- 95,4
- Coût / 1 M tâches
- 31,80 $
- Durée / tâche
- 0,093 s
- #7GLiDE v1.2Décisionnel65,0
Fastino
- Précision
- 27,6
- Non-halluc.
- 77,9
- HLE
- 17,5
- When2Call
- 94,4
- WildGuard
- 95,4
- Coût / 1 M tâches
- 31,74 $
- Durée / tâche
- 0,171 s
- #8SubQ Snap 1.1Décisionnel65,0
Subquadratic
- Précision
- 20,2
- Non-halluc.
- 85,7
- HLE
- 17,5
- When2Call
- 94,6
- WildGuard
- 94,9
- Coût / 1 M tâches
- 30,34 $
- Durée / tâche
- 0,19 s
- #9Elephant 9BDécisionnel64,7
Baseten
- Précision
- 11,6
- Non-halluc.
- 93,2
- HLE
- 18,3
- When2Call
- 94,8
- WildGuard
- 93,3
- Coût / 1 M tâches
- 8,39 $
- Durée / tâche
- 0,165 s
- Précision
- 58,6
- Non-halluc.
- 55,1
- HLE
- 30,2
- When2Call
- 77,6
- WildGuard
- 93,1
- Coût / 1 M tâches
- 493,09 $
- Durée / tâche
- 1,55 s
- Précision
- 27,6
- Non-halluc.
- 71,3
- HLE
- 16,0
- When2Call
- 94,0
- WildGuard
- 95,5
- Coût / 1 M tâches
- 23,03 $
- Durée / tâche
- 0,353 s
- Précision
- 57,2
- Non-halluc.
- 48,6
- HLE
- 26,7
- When2Call
- 76,9
- WildGuard
- 93,8
- Coût / 1 M tâches
- 292,17 $
- Durée / tâche
- 1,48 s
- Précision
- 58,6
- Non-halluc.
- 48,8
- HLE
- 23,2
- When2Call
- 75,4
- WildGuard
- 93,3
- Coût / 1 M tâches
- 232,41 $
- Durée / tâche
- 1,53 s
- Précision
- 73,6
- Non-halluc.
- 3,0
- HLE
- 35,3
- When2Call
- 79,0
- WildGuard
- 90,5
- Coût / 1 M tâches
- 591,63 $
- Durée / tâche
- 2,25 s
- Précision
- 52,4
- Non-halluc.
- 54,6
- HLE
- 23,6
- When2Call
- 72,6
- WildGuard
- 92,6
- Coût / 1 M tâches
- 184,25 $
- Durée / tâche
- 1,43 s
- Précision
- 69,6
- Non-halluc.
- 3,3
- HLE
- 32,4
- When2Call
- 78,6
- WildGuard
- 88,9
- Coût / 1 M tâches
- 234,32 $
- Durée / tâche
- 1,8 s
- Précision
- 71,2
- Non-halluc.
- 0,0
- HLE
- 29,0
- When2Call
- 78,2
- WildGuard
- 89,8
- Coût / 1 M tâches
- 181,79 $
- Durée / tâche
- 1,73 s
- Précision
- 27,4
- Non-halluc.
- 60,3
- HLE
- 13,6
- When2Call
- 86,2
- WildGuard
- 87,9
- Coût / 1 M tâches
- 41,36 $
- Durée / tâche
- 0,252 s
- Précision
- 34,6
- Non-halluc.
- 35,2
- HLE
- 20,9
- When2Call
- 80,7
- WildGuard
- 93,6
- Coût / 1 M tâches
- 41,53 $
- Durée / tâche
- 0,127 s
- Précision
- 33,8
- Non-halluc.
- 37,2
- HLE
- 18,9
- When2Call
- 80,8
- WildGuard
- 93,1
- Coût / 1 M tâches
- 41,53 $
- Durée / tâche
- 0,078 s
- Précision
- 39,4
- Non-halluc.
- 16,5
- HLE
- 14,6
- When2Call
- 87,7
- WildGuard
- 94,4
- Coût / 1 M tâches
- 15,14 $
- Durée / tâche
- 0,206 s
- Précision
- 47,6
- Non-halluc.
- 4,2
- HLE
- 25,7
- When2Call
- 77,6
- WildGuard
- 92,8
- Coût / 1 M tâches
- 624,44 $
- Durée / tâche
- 14,4 s
- Précision
- 66,0
- Non-halluc.
- 0,0
- HLE
- 22,2
- When2Call
- 77,0
- WildGuard
- 88,5
- Coût / 1 M tâches
- 131,05 $
- Durée / tâche
- 1,5 s
- #24GLiDEDécisionnel53,9
Fastino
- Précision
- 36,4
- Non-halluc.
- 16,4
- HLE
- 10,5
- When2Call
- 83,7
- WildGuard
- 95,1
- Coût / 1 M tâches
- 119,02 $
- Durée / tâche
- 0,217 s
- Précision
- 28,2
- Non-halluc.
- 39,8
- HLE
- 10,9
- When2Call
- 81,9
- WildGuard
- 88,2
- Coût / 1 M tâches
- 30,71 $
- Durée / tâche
- 0,207 s
- Précision
- 39,8
- Non-halluc.
- 13,3
- HLE
- 15,4
- When2Call
- 76,5
- WildGuard
- 93,8
- Coût / 1 M tâches
- 16,53 $
- Durée / tâche
- 0,17 s
- Précision
- 35,0
- Non-halluc.
- 32,0
- HLE
- 10,1
- When2Call
- 79,3
- WildGuard
- 88,0
- Coût / 1 M tâches
- 15,20 $
- Durée / tâche
- 0,5 s
- #28Celeris-1 DecisionDécisionnel52,3
Celeris
- Précision
- 37,8
- Non-halluc.
- 0,0
- HLE
- 13,3
- When2Call
- 83,7
- WildGuard
- 93,3
- Coût / 1 M tâches
- 31,57 $
- Durée / tâche
- 0,063 s
- Précision
- 37,6
- Non-halluc.
- 0,6
- HLE
- 12,1
- When2Call
- 84,8
- WildGuard
- 86,9
- Coût / 1 M tâches
- 34,47 $
- Durée / tâche
- 0,186 s
- Précision
- 41,0
- Non-halluc.
- 1,7
- HLE
- 11,5
- When2Call
- 77,4
- WildGuard
- 90,9
- Coût / 1 M tâches
- 15,14 $
- Durée / tâche
- 0,299 s
- Précision
- 35,2
- Non-halluc.
- 6,5
- HLE
- 12,1
- When2Call
- 74,4
- WildGuard
- 93,3
- Coût / 1 M tâches
- 8,23 $
- Durée / tâche
- 0,11 s
- Précision
- 45,4
- Non-halluc.
- 0,4
- HLE
- 12,3
- When2Call
- 76,1
- WildGuard
- 87,1
- Coût / 1 M tâches
- 88,44 $
- Durée / tâche
- 1,14 s
- Précision
- 39,0
- Non-halluc.
- 4,3
- HLE
- 11,1
- When2Call
- 71,0
- WildGuard
- 90,7
- Coût / 1 M tâches
- 199,41 $
- Durée / tâche
- 0,309 s
- Précision
- 40,6
- Non-halluc.
- 10,1
- HLE
- 11,7
- When2Call
- 74,1
- WildGuard
- 82,8
- Coût / 1 M tâches
- 78,87 $
- Durée / tâche
- 0,168 s
- Précision
- 32,6
- Non-halluc.
- 2,7
- HLE
- 10,3
- When2Call
- 64,4
- WildGuard
- 90,9
- Coût / 1 M tâches
- 31,57 $
- Durée / tâche
- 0,298 s
- Précision
- 36,0
- Non-halluc.
- 1,6
- HLE
- 9,0
- When2Call
- 62,1
- WildGuard
- 87,2
- Coût / 1 M tâches
- 123,08 $
- Durée / tâche
- 0,172 s
| # | Modèle | Index | Précision | Non-halluc. | HLE | When2Call | WildGuard | Coût / 1 M tâches | Durée / tâche |
|---|---|---|---|---|---|---|---|---|---|
Claude Opus 5.5 (Max, Default Fallback)LLM Anthropic | 79,0 | 93,4 | 30,3 | 70,2 | 90,5 | 93,5 | 51 294,90 $ | 3,57 s | |
| 2 | Claude Opus 5.5 (Low, Default Fallback)LLM Anthropic | 75,4 | 93,4 | 27,3 | 59,8 | 88,1 | 93,5 | 6 688,16 $ | 1,87 s |
| 3 | GPT-6.1 Sol (Low)LLM OpenAI | 71,5 | 93,0 | 22,9 | 55,4 | 80,6 | 92,0 | 2 048,35 $ | 2,89 s |
| 4 | GPT-6.1 Sol (Max)LLM OpenAI | 70,9 | 91,0 | 11,1 | 58,9 | 81,2 | 92,5 | 6 322,89 $ | 4,43 s |
| 5 | Claude Haiku 5.5 (Max)LLM Anthropic | 68,4 | 57,6 | 69,3 | 37,4 | 79,4 | 93,2 | 2 073,24 $ | 2,66 s |
| 6 | d1-ultraDécisionnel Liquid | 65,2 | 31,6 | 84,5 | 15,0 | 92,6 | 95,4 | 31,80 $ | 0,093 s |
| 7 | GLiDE v1.2Décisionnel Fastino | 65,0 | 27,6 | 77,9 | 17,5 | 94,4 | 95,4 | 31,74 $ | 0,171 s |
| 8 | SubQ Snap 1.1Décisionnel Subquadratic | 65,0 | 20,2 | 85,7 | 17,5 | 94,6 | 94,9 | 30,34 $ | 0,19 s |
| 9 | Elephant 9BDécisionnel Baseten | 64,7 | 11,6 | 93,2 | 18,3 | 94,8 | 93,3 | 8,39 $ | 0,165 s |
| 10 | Claude Haiku 5.5 (Xhigh)LLM Anthropic | 64,4 | 58,6 | 55,1 | 30,2 | 77,6 | 93,1 | 493,09 $ | 1,55 s |
| 11 | Drex MaxDécisionnel Nace Ai | 63,7 | 27,6 | 71,3 | 16,0 | 94,0 | 95,5 | 23,03 $ | 0,353 s |
| 12 | Claude Haiku 5.5 (High)LLM Anthropic | 62,6 | 57,2 | 48,6 | 26,7 | 76,9 | 93,8 | 292,17 $ | 1,48 s |
| 13 | Claude Haiku 5.5 (Medium)LLM Anthropic | 61,4 | 58,6 | 48,8 | 23,2 | 75,4 | 93,3 | 232,41 $ | 1,53 s |
| 14 | GPT-6 Luna (Max)LLM OpenAI | 60,8 | 73,6 | 3,0 | 35,3 | 79,0 | 90,5 | 591,63 $ | 2,25 s |
| 15 | Claude Haiku 5.5 (Low)LLM Anthropic | 60,6 | 52,4 | 54,6 | 23,6 | 72,6 | 92,6 | 184,25 $ | 1,43 s |
| 16 | GPT-6 Luna (High)LLM OpenAI | 59,1 | 69,6 | 3,3 | 32,4 | 78,6 | 88,9 | 234,32 $ | 1,8 s |
| 17 | GPT-6 Luna (Medium)LLM OpenAI | 58,2 | 71,2 | 0,0 | 29,0 | 78,2 | 89,8 | 181,79 $ | 1,73 s |
| 18 | Drex 2.0Décisionnel Nace Ai | 57,9 | 27,4 | 60,3 | 13,6 | 86,2 | 87,9 | 41,36 $ | 0,252 s |
| 19 | Jev 1.13Décisionnel Typesafe | 57,5 | 34,6 | 35,2 | 20,9 | 80,7 | 93,6 | 41,53 $ | 0,127 s |
| 20 | Jev 1.14Décisionnel Typesafe | 57,1 | 33,8 | 37,2 | 18,9 | 80,8 | 93,1 | 41,53 $ | 0,078 s |
| 21 | Decider v1.2Décisionnel Perplexity | 56,2 | 39,4 | 16,5 | 14,6 | 87,7 | 94,4 | 15,14 $ | 0,206 s |
| 22 | Gemma 4 31B (Reasoning)LLM Google · DeepInfra | 55,5 | 47,6 | 4,2 | 25,7 | 77,6 | 92,8 | 624,44 $ | 14,4 s |
| 23 | GPT-6 Luna (Low)LLM OpenAI | 55,2 | 66,0 | 0,0 | 22,2 | 77,0 | 88,5 | 131,05 $ | 1,5 s |
| 24 | GLiDEDécisionnel Fastino | 53,9 | 36,4 | 16,4 | 10,5 | 83,7 | 95,1 | 119,02 $ | 0,217 s |
| 25 | Microsoft-Decision-1Décisionnel Microsoft · OpenRouter | 53,8 | 28,2 | 39,8 | 10,9 | 81,9 | 88,2 | 30,71 $ | 0,207 s |
| 26 | Decider v1.1 27BDécisionnel Perplexity | 53,1 | 39,8 | 13,3 | 15,4 | 76,5 | 93,8 | 16,53 $ | 0,17 s |
| 27 | Mercury DecideDécisionnel Inception | 52,7 | 35,0 | 32,0 | 10,1 | 79,3 | 88,0 | 15,20 $ | 0,5 s |
| 28 | Celeris-1 DecisionDécisionnel Celeris | 52,3 | 37,8 | 0,0 | 13,3 | 83,7 | 93,3 | 31,57 $ | 0,063 s |
| 29 | Drex 1.5Décisionnel Nace Ai | 50,7 | 37,6 | 0,6 | 12,1 | 84,8 | 86,9 | 34,47 $ | 0,186 s |
| 30 | d1Décisionnel Liquid | 50,3 | 41,0 | 1,7 | 11,5 | 77,4 | 90,9 | 15,14 $ | 0,299 s |
| 31 | Decider Flash v1.2Décisionnel Perplexity | 50,2 | 35,2 | 6,5 | 12,1 | 74,4 | 93,3 | 8,23 $ | 0,11 s |
| 32 | GPT-6 Luna (Non-reasoning)LLM OpenAI | 49,6 | 45,4 | 0,4 | 12,3 | 76,1 | 87,1 | 88,44 $ | 1,14 s |
| 33 | ClefDécisionnel Cloudflare | 48,6 | 39,0 | 4,3 | 11,1 | 71,0 | 90,7 | 199,41 $ | 0,309 s |
| 34 | GPT-6 Luna (Decisions)Décisionnel OpenAI | 48,5 | 40,6 | 10,1 | 11,7 | 74,1 | 82,8 | 78,87 $ | 0,168 s |
| 35 | Clef-FlashDécisionnel Cloudflare | 45,8 | 32,6 | 2,7 | 10,3 | 64,4 | 90,9 | 31,57 $ | 0,298 s |
| 36 | Clef-OmniDécisionnel Cloudflare | 44,3 | 36,0 | 1,6 | 9,0 | 62,1 | 87,2 | 123,08 $ | 0,172 s |
Méthode et versions
L'Artificial Analysis Decision Index combine quatre évaluations. Chaque tâche présente un état, le texte sur lequel décider, et une ou plusieurs questions à choix nommés ou par oui ou non ; le modèle répond à toutes les questions d'une tâche en un seul appel.
- L'index est la moyenne à parts égales (25 % chacune) d'AA-Omniscience-Decision, HLE-MultiChoice, When2Call et WildGuardTest ; AA-Omniscience-Decision compte pour moitié sa précision et pour moitié son taux de non-hallucination.
- Les modèles décisionnels reçoivent l'état et les questions via leur API de décision et renvoient l'option choisie avec une probabilité par option ; pour un oui ou non, la réponse est oui à partir d'une probabilité de 0,5.
- Les LLM reçoivent un prompt système fixe, l'état et les questions en texte, et répondent en JSON contraint par des sorties structurées.
- AA-Omniscience-Decision : 500 questions privées tirées d'AA-Omniscience, chacune avec quatre réponses, dont une correcte, et « je ne sais pas ».
- HLE-MultiChoice : les 513 questions à choix multiple sans image de Humanity's Last Exam, sur 2 500 au total.
- When2Call : 3 423 des 3 652 tâches du jeu de test de NVIDIA ; AA écarte 229 tâches « demander une précision » ambiguës.
- WildGuardTest : évaluation de classification de sécurité, scorée en F1 moyen.
- Coût et durée sont les moyennes par tâche publiées par Artificial Analysis ; le coût est affiché pour 1 million de tâches, comme sur AA.
Données via Artificial Analysis, Decision Index.