MedicalBenchmark
Mistral: Mistral 7B Instruct v0.2 provider

Mistral 7B Instruct v0.2

292

#292 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

181.00 pts

Exatidão

46.0%

Corretas / Incorretas

276 / 285

Custo total

$0.12

Desempenho Geral

(vs. média)
Exatidão

46.0%

avg: 80.6%

Pontuação líquida

181.00 pts

avg: 453.30 pts

Acertos

276

avg: 483

Erros

285

avg: 90

Custo total

$0.12

avg: $9.58

Tempo médio de resposta

2.2s

avg: 17.9s

Tokens de saída

235K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

93.5%

avg: 95.4%

Desagregação por Exame

MIR 2024
296
Corretas
87
Incorretas
98
Exatidão
43.5%
Pontuação líquida
54.33
MIR 2025
292
Corretas
84
Incorretas
100
Exatidão
42.0%
Pontuação líquida
50.66
MIR 2026
289
Corretas
105
Incorretas
87
Exatidão
52.5%
Pontuação líquida
76.00