MedicalBenchmark
AllenAI: Olmo 3.1 32B Instruct provider

Olmo 3.1 32B Instruct

278

#278 de 319 modelos no ranking xeral

Rendemento acumulado en 3 exames MIR

Puntuación neta

273.00 pts

Certeza

58.0%

Correctas / Incorrectas

348 / 225

Custo total

$0.34

Rendemento Xeral

(vs. media)
Certeza

58.0%

avg: 80.6%

Puntuación neta

273.00 pts

avg: 453.30 pts

Acertos

348

avg: 483

Erros

225

avg: 90

Custo total

$0.34

avg: $9.58

Tempo promedio de resposta

12.6s

avg: 17.9s

Tokens saíntes

453K

avg: 1.3M

Tokens de razoamento

0

avg: 898K

Confianza promedia

94.4%

avg: 95.4%

Desagregación por Exame

MIR 2024
279
Correctas
116
Incorrectas
76
Certeza
58.0%
Puntuación neta
90.66
MIR 2025
276
Correctas
107
Incorrectas
83
Certeza
53.5%
Puntuación neta
79.33
MIR 2026
279
Correctas
125
Incorrectas
66
Certeza
62.5%
Puntuación neta
103.00