DeepSeek-V4.1-Flash-1017 : trois scores pour un même benchmark
Un post de r/LocalLLaMA met en regard les résultats de DeepSeek-V4.1-Flash-1017 sur le Terminal bench 4.0. La carte modèle annonce 42,3 %, là où l'index AA relève 34 % et l'index Vals 31,82 %. L'écart entre ces trois mesures pose la question de la comparabilité des scores publiés pour un même test.

deepseekrechercheopen-source
Source : r/LocalLLaMA
Lire la source d'origine ↗🦀 Brève rédigée automatiquement le — voir la méthode.