MedicalBenchmark
AllenAI: Olmo 3 7B Instruct provider

Olmo 3 7B Instruct

276

#276 de 290 modelosMIR 2026

Puntuación neta

56.33 pts

Certeza

44.0%

Correctas / Incorrectas

88 / 95

Custo total

$0.05

Rendemento Xeral

(vs. media)
Certeza

44.0%

avg: 81.6%

Puntuación neta

56.33 pts

avg: 154.00 pts

Acertos

88

avg: 163

Erros

95

avg: 28

Custo total

$0.05

avg: $3.33

Tempo promedio de resposta

17.6s

avg: 16.2s

Tokens saíntes

172K

avg: 430K

Tokens de razoamento

0

avg: 310K

Confianza promedia

84.9%

avg: 95.1%

Desglose por Materia

Alerxoloxía
Acertos
0
Erros
1
Non contestadas
0
Certeza
0.0%
Media
96.9%
Anestesioloxía e Reanimación
Acertos
3
Erros
3
Non contestadas
1
Certeza
42.9%
Media
69.6%
Cardioloxía
Acertos
8
Erros
17
Non contestadas
0
Certeza
32.0%
Media
77.3%
Coidados Paliativos
Acertos
2
Erros
4
Non contestadas
0
Certeza
33.3%
Media
80.2%
Dermatoloxía
Acertos
7
Erros
3
Non contestadas
1
Certeza
63.6%
Media
72.3%
Endocrinoloxía e Nutrición
Acertos
8
Erros
7
Non contestadas
0
Certeza
53.3%
Media
84.0%
Enfermidades Infecciosas
Acertos
7
Erros
5
Non contestadas
2
Certeza
50.0%
Media
77.9%
Epidemioloxía
Acertos
1
Erros
4
Non contestadas
2
Certeza
14.3%
Media
80.2%
Estatística
Acertos
0
Erros
1
Non contestadas
1
Certeza
0.0%
Media
83.8%
Farmacoloxía
Acertos
4
Erros
6
Non contestadas
1
Certeza
36.4%
Media
78.6%
Gastroenteroloxía
Acertos
18
Erros
11
Non contestadas
1
Certeza
60.0%
Media
79.3%
Hematoloxía
Acertos
3
Erros
4
Non contestadas
2
Certeza
33.3%
Media
76.6%
Inmunoloxía
Acertos
5
Erros
1
Non contestadas
0
Certeza
83.3%
Media
91.4%
Medicina Legal e Bioética
Acertos
4
Erros
6
Non contestadas
1
Certeza
36.4%
Media
82.9%
Nefroloxía
Acertos
3
Erros
6
Non contestadas
1
Certeza
30.0%
Media
85.1%
Neuroloxía
Acertos
4
Erros
7
Non contestadas
2
Certeza
30.8%
Media
88.6%
Oftalmoloxía
Acertos
1
Erros
4
Non contestadas
0
Certeza
20.0%
Media
83.7%
Oncoloxía Médica
Acertos
12
Erros
10
Non contestadas
1
Certeza
52.2%
Media
83.0%
ORL
Acertos
4
Erros
3
Non contestadas
1
Certeza
50.0%
Media
84.7%
Pediatría
Acertos
12
Erros
8
Non contestadas
2
Certeza
54.5%
Media
87.6%
Planificación e Xestión Sanitaria
Acertos
4
Erros
3
Non contestadas
3
Certeza
40.0%
Media
78.4%
Pneumoloxía
Acertos
11
Erros
5
Non contestadas
0
Certeza
68.8%
Media
82.8%
Psiquiatría
Acertos
3
Erros
4
Non contestadas
1
Certeza
37.5%
Media
87.9%
Radioloxía-Urxencias
Acertos
2
Erros
10
Non contestadas
1
Certeza
15.4%
Media
67.7%
Reumatoloxía
Acertos
6
Erros
3
Non contestadas
2
Certeza
54.5%
Media
88.4%
Traumatoloxía
Acertos
5
Erros
5
Non contestadas
1
Certeza
45.5%
Media
65.2%
Uroloxía
Acertos
3
Erros
5
Non contestadas
0
Certeza
37.5%
Media
82.5%
Xenética
Acertos
5
Erros
5
Non contestadas
1
Certeza
45.5%
Media
78.7%
Xeriatría
Acertos
6
Erros
7
Non contestadas
0
Certeza
46.2%
Media
83.0%
Xinecoloxía e Obstetricia
Acertos
4
Erros
7
Non contestadas
1
Certeza
33.3%
Media
84.3%

Desglose por Tipo de Pregunta

Anatomía
Acertos
1
Erros
2
Non contestadas
0
Certeza
33.3%
Media
82.6%
Bioestatística
Acertos
0
Erros
1
Non contestadas
1
Certeza
0.0%
Media
83.8%
Diagnóstico
Acertos
27
Erros
48
Non contestadas
6
Certeza
33.3%
Media
82.2%
Epidemioloxía
Acertos
3
Erros
4
Non contestadas
2
Certeza
33.3%
Media
88.7%
Ética
Acertos
4
Erros
2
Non contestadas
0
Certeza
66.7%
Media
92.0%
Farmacoloxía
Acertos
8
Erros
6
Non contestadas
1
Certeza
53.3%
Media
82.3%
Fisiopatoloxía
Acertos
14
Erros
9
Non contestadas
3
Certeza
53.8%
Media
84.3%
Interpretación
Acertos
13
Erros
20
Non contestadas
4
Certeza
35.1%
Media
72.0%
Legal
Acertos
4
Erros
4
Non contestadas
1
Certeza
44.4%
Media
82.4%
Prevención
Acertos
7
Erros
7
Non contestadas
2
Certeza
43.8%
Media
80.6%
Probas
Acertos
15
Erros
17
Non contestadas
1
Certeza
45.5%
Media
80.3%
Prognóstico
Acertos
2
Erros
1
Non contestadas
2
Certeza
40.0%
Media
93.2%
Risco
Acertos
5
Erros
9
Non contestadas
1
Certeza
33.3%
Media
84.3%
Tratamento
Acertos
35
Erros
32
Non contestadas
5
Certeza
48.6%
Media
80.1%
#RespostaCorrectaEstado
1BA
2CB
3AD
4CD
5BB
6C
7AB
8BD
9DD
10AA
11AB
12AA
13BAnulada
14BC
15BA
16CC
17CC
18BD
19DB
20BB
21BB
22CC
23CB
24DA
25AC
26A
27BB
28CD
29CA
30D
31DC
32BC
33B
34AB
35CC
36CD
37DD
38AA
39CC
40CA
41CD
42AA
43BB
44BB
45B
46BB
47DD
48CC
49CC
50AAnulada
51BA
52BC
53DC
54BC
55CA
56CA
57A
58BA
59DB
60BB
61CC
62B
63AB
64CAnulada
65DC
66DC
67CC
68AA
69BB
70BB
71AB
72BB
73BB
74AA
75BC
76CC
77AA
78CD
79AA
80DD
81CC
82CD
83BB
84BA
85BD
86DA
87BB
88CB
89BB
90CC
91AA
92AC
93BD
94BC
95AC
96B
97CB
98AA
99BB
100CC
101CC
102A
103CC
104DC
105CC
106CB
107CC
108BA
109AC
110AC
111AB
112CC
113CC
114DD
115AB
116CD
117CC
118AB
119DA
120CA
121AC
122AB
123CB
124DB
125BC
126BB
127CC
128BB
129BC
130CC
131BB
132CB
133CC
134CB
135BC
136AB
137CD
138B
139CAnulada
140DD
141BA
142BAnulada
143AA
144DD
145C
146AC
147BB
148C
149BB
150BB
151BB
152CC
153CC
154BD
155BB
156CA
157DD
158BB
159BC
160AA
161CAnulada
162AA
163BC
164AC
165BA
166DA
167D
168AC
169B
170CB
171AA
172AB
173DD
174AC
175BB
176A
177CD
178AD
179B
180CC
181DB
182CC
183D
184DD
185AB
186DD
187DD
188CC
189CC
190AB
191BD
192BD
193CC
194CC
195AD
196DA
197CC
198DA
199BB
200AD
201AC
202BA
203AA
204AC
205BB
206CC
207AA
208DAnulada
209CB
210BC