MedicalBenchmark
AllenAI: Olmo 3 32B Think provider

Olmo 3 32B Think

249

#249 de 319 modelos no ranking xeral

Rendemento acumulado en 3 exames MIR

Puntuación neta

399.66 pts

Certeza

72.8%

Correctas / Incorrectas

437 / 112

Custo total

$1.12

Rendemento Xeral

(vs. media)
Certeza

72.8%

avg: 80.6%

Puntuación neta

399.66 pts

avg: 453.30 pts

Acertos

437

avg: 483

Erros

112

avg: 90

Custo total

$1.12

avg: $9.58

Tempo promedio de resposta

46.7s

avg: 17.9s

Tokens saíntes

2.1M

avg: 1.3M

Tokens de razoamento

1.9M

avg: 898K

Confianza promedia

88.0%

avg: 95.4%

Desagregación por Exame

MIR 2024
244
Correctas
152
Incorrectas
36
Certeza
76.0%
Puntuación neta
140.00
MIR 2025
247
Correctas
140
Incorrectas
42
Certeza
70.0%
Puntuación neta
126.00
MIR 2026
253
Correctas
145
Incorrectas
34
Certeza
72.5%
Puntuación neta
133.66