MedicalBenchmark
Mistral: Devstral Small 1.1 provider

Devstral Small 1.1

227

#227 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

446.66 pts

Exatidão

80.0%

Corretas / Incorretas

480 / 100

Custo total

$0.10

Desempenho Geral

(vs. média)
Exatidão

80.0%

avg: 80.6%

Pontuação líquida

446.66 pts

avg: 453.30 pts

Acertos

480

avg: 483

Erros

100

avg: 90

Custo total

$0.10

avg: $9.58

Tempo médio de resposta

2.4s

avg: 17.9s

Tokens de saída

251K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

95.9%

avg: 95.4%

Desagregação por Exame

MIR 2024
221
Corretas
165
Incorretas
33
Exatidão
82.5%
Pontuação líquida
154.00
MIR 2025
224
Corretas
153
Incorretas
40
Exatidão
76.5%
Pontuação líquida
139.66
MIR 2026
230
Corretas
162
Incorretas
27
Exatidão
81.0%
Pontuação líquida
153.00