MedicalBenchmark
AllenAI: Olmo 3.1 32B Instruct provider

Olmo 3.1 32B Instruct

278

#278 de 319 models al ranking general

Rendiment acumulat en 3 exàmens MIR

Puntuació neta

273.00 pts

Certesa

58.0%

Correctes / Incorrectes

348 / 225

Cost total

$0.34

Rendiment General

(vs. mitjana)
Certesa

58.0%

avg: 80.6%

Puntuació neta

273.00 pts

avg: 453.30 pts

Encerts

348

avg: 483

Errors

225

avg: 90

Cost total

$0.34

avg: $9.58

Temps mitjà de resposta

12.6s

avg: 17.9s

Tokens sortints

453K

avg: 1.3M

Tokens de raonament

0

avg: 898K

Confiança mitjana

94.4%

avg: 95.4%

Desglossament per Examen

MIR 2024
279
Correctes
116
Incorrectes
76
Certesa
58.0%
Puntuació neta
90.66
MIR 2025
276
Correctes
107
Incorrectes
83
Certesa
53.5%
Puntuació neta
79.33
MIR 2026
279
Correctes
125
Incorrectes
66
Certesa
62.5%
Puntuació neta
103.00