MedicalBenchmark
AllenAI: Olmo 3 7B Instruct provider

Olmo 3 7B Instruct

276

#276 de 290 modelosMIR 2026

Puntuación neta

56.33 pts

Certeza

44.0%

Correctas / Incorrectas

88 / 95

Coste total

$0.05

Rendimiento General

(vs. media)
Certeza

44.0%

avg: 81.6%

Puntuación neta

56.33 pts

avg: 154.00 pts

Aciertos

88

avg: 163

Fallos

95

avg: 28

Coste total

$0.05

avg: $3.33

Tiempo promedio de respuesta

17.6s

avg: 16.2s

Tokens salientes

172K

avg: 430K

Tokens de razonamiento

0

avg: 310K

Confianza promedio

84.9%

avg: 95.1%

Desglose por Asignatura

Alergología
Aciertos
0
Fallos
1
Vacías
0
Certeza
0.0%
Media
96.9%
Anestesiología y Reanimación
Aciertos
3
Fallos
3
Vacías
1
Certeza
42.9%
Media
69.6%
Cardiología
Aciertos
8
Fallos
17
Vacías
0
Certeza
32.0%
Media
77.3%
Cuidados Paliativos
Aciertos
2
Fallos
4
Vacías
0
Certeza
33.3%
Media
80.2%
Dermatología
Aciertos
7
Fallos
3
Vacías
1
Certeza
63.6%
Media
72.3%
Endocrinología y Nutrición
Aciertos
8
Fallos
7
Vacías
0
Certeza
53.3%
Media
84.0%
Enfermedades Infecciosas
Aciertos
7
Fallos
5
Vacías
2
Certeza
50.0%
Media
77.9%
Epidemiología
Aciertos
1
Fallos
4
Vacías
2
Certeza
14.3%
Media
80.2%
Estadística
Aciertos
0
Fallos
1
Vacías
1
Certeza
0.0%
Media
83.8%
Farmacología
Aciertos
4
Fallos
6
Vacías
1
Certeza
36.4%
Media
78.6%
Gastroenterología
Aciertos
18
Fallos
11
Vacías
1
Certeza
60.0%
Media
79.3%
Genética
Aciertos
5
Fallos
5
Vacías
1
Certeza
45.5%
Media
78.7%
Geriatría
Aciertos
6
Fallos
7
Vacías
0
Certeza
46.2%
Media
83.0%
Ginecología y Obstetricia
Aciertos
4
Fallos
7
Vacías
1
Certeza
33.3%
Media
84.3%
Hematología
Aciertos
3
Fallos
4
Vacías
2
Certeza
33.3%
Media
76.6%
Inmunología
Aciertos
5
Fallos
1
Vacías
0
Certeza
83.3%
Media
91.4%
Medicina Legal y Bioética
Aciertos
4
Fallos
6
Vacías
1
Certeza
36.4%
Media
82.9%
Nefrología
Aciertos
3
Fallos
6
Vacías
1
Certeza
30.0%
Media
85.1%
Neumología
Aciertos
11
Fallos
5
Vacías
0
Certeza
68.8%
Media
82.8%
Neurología
Aciertos
4
Fallos
7
Vacías
2
Certeza
30.8%
Media
88.6%
Oftalmología
Aciertos
1
Fallos
4
Vacías
0
Certeza
20.0%
Media
83.7%
Oncología Médica
Aciertos
12
Fallos
10
Vacías
1
Certeza
52.2%
Media
83.0%
ORL
Aciertos
4
Fallos
3
Vacías
1
Certeza
50.0%
Media
84.7%
Pediatría
Aciertos
12
Fallos
8
Vacías
2
Certeza
54.5%
Media
87.6%
Planificación y Gestión Sanitaria
Aciertos
4
Fallos
3
Vacías
3
Certeza
40.0%
Media
78.4%
Psiquiatría
Aciertos
3
Fallos
4
Vacías
1
Certeza
37.5%
Media
87.9%
Radiología-Urgencias
Aciertos
2
Fallos
10
Vacías
1
Certeza
15.4%
Media
67.7%
Reumatología
Aciertos
6
Fallos
3
Vacías
2
Certeza
54.5%
Media
88.4%
Traumatología
Aciertos
5
Fallos
5
Vacías
1
Certeza
45.5%
Media
65.2%
Urología
Aciertos
3
Fallos
5
Vacías
0
Certeza
37.5%
Media
82.5%

Desglose por Tipo de Pregunta

Anatomía
Aciertos
1
Fallos
2
Vacías
0
Certeza
33.3%
Media
82.6%
Bioestadística
Aciertos
0
Fallos
1
Vacías
1
Certeza
0.0%
Media
83.8%
Diagnóstico
Aciertos
27
Fallos
48
Vacías
6
Certeza
33.3%
Media
82.2%
Epidemiología
Aciertos
3
Fallos
4
Vacías
2
Certeza
33.3%
Media
88.7%
Ética
Aciertos
4
Fallos
2
Vacías
0
Certeza
66.7%
Media
92.0%
Farmacología
Aciertos
8
Fallos
6
Vacías
1
Certeza
53.3%
Media
82.3%
Fisiopatología
Aciertos
14
Fallos
9
Vacías
3
Certeza
53.8%
Media
84.3%
Interpretación
Aciertos
13
Fallos
20
Vacías
4
Certeza
35.1%
Media
72.0%
Legal
Aciertos
4
Fallos
4
Vacías
1
Certeza
44.4%
Media
82.4%
Prevención
Aciertos
7
Fallos
7
Vacías
2
Certeza
43.8%
Media
80.6%
Pronóstico
Aciertos
2
Fallos
1
Vacías
2
Certeza
40.0%
Media
93.2%
Pruebas
Aciertos
15
Fallos
17
Vacías
1
Certeza
45.5%
Media
80.3%
Riesgo
Aciertos
5
Fallos
9
Vacías
1
Certeza
33.3%
Media
84.3%
Tratamiento
Aciertos
35
Fallos
32
Vacías
5
Certeza
48.6%
Media
80.1%
#RespuestaCorrectaEstado
1BA
2CB
3AD
4CD
5BB
6C
7AB
8BD
9DD
10AA
11AB
12AA
13BAnulada
14BC
15BA
16CC
17CC
18BD
19DB
20BB
21BB
22CC
23CB
24DA
25AC
26A
27BB
28CD
29CA
30D
31DC
32BC
33B
34AB
35CC
36CD
37DD
38AA
39CC
40CA
41CD
42AA
43BB
44BB
45B
46BB
47DD
48CC
49CC
50AAnulada
51BA
52BC
53DC
54BC
55CA
56CA
57A
58BA
59DB
60BB
61CC
62B
63AB
64CAnulada
65DC
66DC
67CC
68AA
69BB
70BB
71AB
72BB
73BB
74AA
75BC
76CC
77AA
78CD
79AA
80DD
81CC
82CD
83BB
84BA
85BD
86DA
87BB
88CB
89BB
90CC
91AA
92AC
93BD
94BC
95AC
96B
97CB
98AA
99BB
100CC
101CC
102A
103CC
104DC
105CC
106CB
107CC
108BA
109AC
110AC
111AB
112CC
113CC
114DD
115AB
116CD
117CC
118AB
119DA
120CA
121AC
122AB
123CB
124DB
125BC
126BB
127CC
128BB
129BC
130CC
131BB
132CB
133CC
134CB
135BC
136AB
137CD
138B
139CAnulada
140DD
141BA
142BAnulada
143AA
144DD
145C
146AC
147BB
148C
149BB
150BB
151BB
152CC
153CC
154BD
155BB
156CA
157DD
158BB
159BC
160AA
161CAnulada
162AA
163BC
164AC
165BA
166DA
167D
168AC
169B
170CB
171AA
172AB
173DD
174AC
175BB
176A
177CD
178AD
179B
180CC
181DB
182CC
183D
184DD
185AB
186DD
187DD
188CC
189CC
190AB
191BD
192BD
193CC
194CC
195AD
196DA
197CC
198DA
199BB
200AD
201AC
202BA
203AA
204AC
205BB
206CC
207AA
208DAnulada
209CB
210BC