MedicalBenchmark
AllenAI: Olmo 3 7B Think provider

Olmo 3 7B Think

283

#283 de 319 models al ranking general

Rendiment acumulat en 3 exàmens MIR

Puntuació neta

244.00 pts

Certesa

55.2%

Correctes / Incorrectes

331 / 261

Cost total

$0.41

Rendiment General

(vs. mitjana)
Certesa

55.2%

avg: 80.6%

Puntuació neta

244.00 pts

avg: 453.30 pts

Encerts

331

avg: 483

Errors

261

avg: 90

Cost total

$0.41

avg: $9.58

Temps mitjà de resposta

15.5s

avg: 17.9s

Tokens sortints

1.9M

avg: 1.3M

Tokens de raonament

1.6M

avg: 898K

Confiança mitjana

97.6%

avg: 95.4%

Desglossament per Examen

MIR 2024
282
Correctes
112
Incorrectes
84
Certesa
56.0%
Puntuació neta
84.00
MIR 2025
287
Correctes
99
Incorrectes
98
Certesa
49.5%
Puntuació neta
66.33
MIR 2026
283
Correctes
120
Incorrectes
79
Certesa
60.0%
Puntuació neta
93.66