MedicalBenchmark
Mistral: Mistral 7B Instruct v0.3 provider

Mistral 7B Instruct v0.3

293

#293 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

177.66 pts

Exatidão

45.7%

Corretas / Incorretas

274 / 289

Custo total

$0.11

Desempenho Geral

(vs. média)
Exatidão

45.7%

avg: 80.6%

Pontuação líquida

177.66 pts

avg: 453.30 pts

Acertos

274

avg: 483

Erros

289

avg: 90

Custo total

$0.11

avg: $9.58

Tempo médio de resposta

1.8s

avg: 17.9s

Tokens de saída

205K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

92.6%

avg: 95.4%

Desagregação por Exame

MIR 2024
298
Corretas
87
Incorretas
103
Exatidão
43.5%
Pontuação líquida
52.66
MIR 2025
295
Corretas
83
Incorretas
101
Exatidão
41.5%
Pontuação líquida
49.33
MIR 2026
290
Corretas
104
Incorretas
85
Exatidão
52.0%
Pontuação líquida
75.66