MedicalBenchmark
AllenAI: Olmo 3 7B Instruct provider

Olmo 3 7B Instruct

309

#309 de 319 modelos no ranking xeral

Rendemento acumulado en 3 exames MIR

Puntuación neta

105.66 pts

Certeza

36.7%

Correctas / Incorrectas

220 / 343

Custo total

$0.14

Rendemento Xeral

(vs. media)
Certeza

36.7%

avg: 80.6%

Puntuación neta

105.66 pts

avg: 453.30 pts

Acertos

220

avg: 483

Erros

343

avg: 90

Custo total

$0.14

avg: $9.58

Tempo promedio de resposta

18.2s

avg: 17.9s

Tokens saíntes

536K

avg: 1.3M

Tokens de razoamento

0

avg: 898K

Confianza promedia

85.6%

avg: 95.4%

Desagregación por Exame

MIR 2024
313
Correctas
67
Incorrectas
124
Certeza
33.5%
Puntuación neta
25.66
MIR 2025
308
Correctas
65
Incorrectas
124
Certeza
32.5%
Puntuación neta
23.66
MIR 2026
304
Correctas
88
Incorrectas
95
Certeza
44.0%
Puntuación neta
56.33