MedicalBenchmark
Mistral: Mistral 7B Instruct provider

Mistral 7B Instruct

291

#291 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

183.00 pts

Exatidão

46.2%

Corretas / Incorretas

277 / 282

Custo total

$0.12

Desempenho Geral

(vs. média)
Exatidão

46.2%

avg: 80.6%

Pontuação líquida

183.00 pts

avg: 453.30 pts

Acertos

277

avg: 483

Erros

282

avg: 90

Custo total

$0.12

avg: $9.58

Tempo médio de resposta

1.9s

avg: 17.9s

Tokens de saída

216K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

92.0%

avg: 95.4%

Desagregação por Exame

MIR 2024
291
Corretas
93
Incorretas
95
Exatidão
46.5%
Pontuação líquida
61.33
MIR 2025
294
Corretas
83
Incorretas
100
Exatidão
41.5%
Pontuação líquida
49.66
MIR 2026
292
Corretas
101
Incorretas
87
Exatidão
50.5%
Pontuação líquida
72.00