MedicalBenchmark
AllenAI: Olmo 3 7B Think provider

Olmo 3 7B Think

287

#287 de 319 modelosMIR 2025

Puntuación neta

66.33 pts

Certeza

49.5%

Correctas / Incorrectas

99 / 98

Coste total

$0.14

Rendimiento General

(vs. media)
Certeza

49.5%

avg: 77.9%

Puntuación neta

66.33 pts

avg: 143.96 pts

Aciertos

99

avg: 156

Fallos

98

avg: 35

Coste total

$0.14

avg: $3.36

Tiempo promedio de respuesta

15.3s

avg: 19.0s

Tokens salientes

613K

avg: 430K

Tokens de razonamiento

547K

avg: 306K

Confianza promedio

97.3%

avg: 95.2%

Desglose por Asignatura

Alergología
Aciertos
1
Fallos
3
Vacías
0
Certeza
25.0%
Media
87.9%
Anestesiología y Reanimación
Aciertos
1
Fallos
5
Vacías
0
Certeza
16.7%
Media
82.3%
Cardiología
Aciertos
7
Fallos
15
Vacías
0
Certeza
31.8%
Media
78.6%
Cuidados Paliativos
Aciertos
1
Fallos
3
Vacías
0
Certeza
25.0%
Media
78.6%
Dermatología
Aciertos
6
Fallos
6
Vacías
0
Certeza
50.0%
Media
69.4%
Endocrinología y Nutrición
Aciertos
10
Fallos
5
Vacías
1
Certeza
62.5%
Media
83.5%
Enfermedades Infecciosas
Aciertos
12
Fallos
15
Vacías
0
Certeza
44.4%
Media
74.9%
Epidemiología
Aciertos
4
Fallos
3
Vacías
0
Certeza
57.1%
Media
69.1%
Estadística
Aciertos
3
Fallos
0
Vacías
0
Certeza
100.0%
Media
76.6%
Farmacología
Aciertos
11
Fallos
6
Vacías
0
Certeza
64.7%
Media
74.1%
Gastroenterología
Aciertos
8
Fallos
13
Vacías
0
Certeza
38.1%
Media
74.1%
Genética
Aciertos
2
Fallos
4
Vacías
0
Certeza
33.3%
Media
69.5%
Geriatría
Aciertos
6
Fallos
5
Vacías
0
Certeza
54.5%
Media
77.5%
Ginecología y Obstetricia
Aciertos
13
Fallos
6
Vacías
0
Certeza
68.4%
Media
86.7%
Hematología
Aciertos
9
Fallos
2
Vacías
0
Certeza
81.8%
Media
82.7%
Inmunología
Aciertos
4
Fallos
4
Vacías
1
Certeza
44.4%
Media
83.3%
Medicina Legal y Bioética
Aciertos
3
Fallos
2
Vacías
0
Certeza
60.0%
Media
68.4%
Nefrología
Aciertos
10
Fallos
4
Vacías
0
Certeza
71.4%
Media
84.8%
Neumología
Aciertos
5
Fallos
9
Vacías
0
Certeza
35.7%
Media
80.4%
Neurología
Aciertos
11
Fallos
8
Vacías
1
Certeza
55.0%
Media
77.3%
Oftalmología
Aciertos
1
Fallos
4
Vacías
0
Certeza
20.0%
Media
74.2%
Oncología Médica
Aciertos
17
Fallos
8
Vacías
0
Certeza
68.0%
Media
87.2%
ORL
Aciertos
3
Fallos
5
Vacías
0
Certeza
37.5%
Media
74.8%
Pediatría
Aciertos
9
Fallos
17
Vacías
0
Certeza
34.6%
Media
71.9%
Planificación y Gestión Sanitaria
Aciertos
1
Fallos
1
Vacías
0
Certeza
50.0%
Media
82.6%
Psiquiatría
Aciertos
6
Fallos
2
Vacías
0
Certeza
75.0%
Media
83.0%
Radiología-Urgencias
Aciertos
7
Fallos
7
Vacías
0
Certeza
50.0%
Media
69.4%
Reumatología
Aciertos
6
Fallos
9
Vacías
0
Certeza
40.0%
Media
76.6%
Traumatología
Aciertos
8
Fallos
9
Vacías
1
Certeza
44.4%
Media
79.3%
Urología
Aciertos
4
Fallos
3
Vacías
0
Certeza
57.1%
Media
80.7%

Desglose por Tipo de Pregunta

Anatomía
Aciertos
3
Fallos
3
Vacías
1
Certeza
42.9%
Media
78.6%
Bioestadística
Aciertos
4
Fallos
0
Vacías
0
Certeza
100.0%
Media
79.8%
Diagnóstico
Aciertos
44
Fallos
43
Vacías
1
Certeza
50.0%
Media
79.9%
Epidemiología
Aciertos
2
Fallos
3
Vacías
0
Certeza
40.0%
Media
76.7%
Ética
Aciertos
1
Fallos
2
Vacías
0
Certeza
33.3%
Media
74.1%
Farmacología
Aciertos
10
Fallos
3
Vacías
0
Certeza
76.9%
Media
83.3%
Fisiopatología
Aciertos
12
Fallos
13
Vacías
2
Certeza
44.4%
Media
76.1%
Interpretación
Aciertos
18
Fallos
23
Vacías
1
Certeza
42.9%
Media
70.7%
Legal
Aciertos
3
Fallos
1
Vacías
0
Certeza
75.0%
Media
64.6%
Prevención
Aciertos
5
Fallos
7
Vacías
0
Certeza
41.7%
Media
75.6%
Pronóstico
Aciertos
3
Fallos
4
Vacías
0
Certeza
42.9%
Media
80.8%
Pruebas
Aciertos
17
Fallos
10
Vacías
0
Certeza
63.0%
Media
77.9%
Riesgo
Aciertos
1
Fallos
4
Vacías
0
Certeza
20.0%
Media
85.2%
Tratamiento
Aciertos
41
Fallos
40
Vacías
0
Certeza
50.6%
Media
77.3%
#RespuestaCorrectaEstado
1BB
2AA
3DC
4DB
5AA
6CC
7BC
8CA
9CA
10AD
11DD
12CD
13AB
14BD
15CAnulada
16DB
17AB
18CA
19BC
20AA
21BB
22DD
23C
24BD
25CC
26DAnulada
27BC
28DAnulada
29BD
30BB
31DD
32AA
33DD
34AD
35BB
36BD
37DC
38BC
39DD
40AA
41DD
42CC
43DB
44DD
45DD
46AA
47AA
48AA
49BD
50BB
51DC
52CB
53AD
54DB
55CA
56BAnulada
57CC
58BB
59DD
60BA
61BA
62DD
63BB
64BD
65CA
66AA
67BB
68DB
69AB
70DA
71CD
72CA
73BD
74CC
75AA
76BB
77BB
78BB
79DC
80CC
81AC
82CD
83BB
84DD
85DC
86BC
87CA
88DD
89CB
90AA
91B
92DC
93BB
94AC
95AA
96DC
97DD
98DC
99BA
100BC
101AB
102DD
103AA
104BC
105AA
106CC
107CB
108BD
109BB
110CC
111BA
112BC
113AB
114AD
115BD
116CC
117AA
118CD
119CC
120DB
121AD
122AC
123CC
124BC
125BD
126DD
127BB
128DD
129BA
130DD
131DD
132AA
133AB
134CC
135CB
136DC
137AA
138DD
139DD
140BB
141AA
142AA
143BB
144BB
145DD
146CC
147DB
148DA
149CA
150DD
151AA
152AA
153B
154BB
155AB
156CC
157AA
158CC
159CC
160BA
161CA
162CAnulada
163CD
164CC
165AA
166BB
167AC
168BD
169CB
170AB
171DC
172BA
173DA
174CB
175CB
176AC
177CC
178BA
179DD
180AA
181BB
182BC
183DB
184BB
185DB
186DAnulada
187CC
188DD
189BD
190AA
191AB
192BA
193CC
194CA
195AA
196AA
197BB
198BC
199DD
200CC
201BB
202BA
203DD
204BC
205BB
206CD
207AA
208CC
209CC
210BB