L'Artificial Analysis Index jugé peu représentatif des usages réels
Un utilisateur de r/LocalLLaMA dit avoir testé Kimi 3.1 Pro via OpenRouter et l'avoir trouvé très mauvais en usage réel, loin derrière DeepSeek 4.1 Flash et MiMo 2.6. Or Kimi 3.1 Pro pointe à la 4e place de l'Artificial Analysis Index. Selon lui, cet index serait facile à manipuler et ne refléterait pas les performances constatées sur des cas concrets.

deepseekrecherche
Source : r/LocalLLaMA
Lire la source d'origine ↗🦀 Brève rédigée automatiquement le — voir la méthode.