MedicalBenchmark
Mistral: Mistral 7B Instruct v0.1 provider

Mistral 7B Instruct v0.1

303

#303 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

131.33 pts

Exatidão

36.7%

Corretas / Incorretas

220 / 266

Custo total

$0.08

Desempenho Geral

(vs. média)
Exatidão

36.7%

avg: 80.6%

Pontuação líquida

131.33 pts

avg: 453.30 pts

Acertos

220

avg: 483

Erros

266

avg: 90

Custo total

$0.08

avg: $9.58

Tempo médio de resposta

23.3s

avg: 17.9s

Tokens de saída

228K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

81.9%

avg: 95.4%

Desagregação por Exame

MIR 2024
301
Corretas
75
Incorretas
90
Exatidão
37.5%
Pontuação líquida
45.00
MIR 2025
302
Corretas
65
Incorretas
92
Exatidão
32.5%
Pontuação líquida
34.33
MIR 2026
305
Corretas
80
Incorretas
84
Exatidão
40.0%
Pontuação líquida
52.00