MedicalBenchmark
AllenAI: Olmo 3 7B Think provider

Olmo 3 7B Think

259

#259 de 290 modelosMIR 2025

Puntuación neta

62.66 pts

Certeza

48.0%

Correctas / Incorrectas

96 / 100

Custo total

$0.14

Rendemento Xeral

(vs. media)
Certeza

48.0%

avg: 75.9%

Puntuación neta

62.66 pts

avg: 138.99 pts

Acertos

96

avg: 152

Erros

100

avg: 38

Custo total

$0.14

avg: $3.59

Tempo promedio de resposta

15.2s

avg: 18.1s

Tokens saíntes

610K

avg: 443K

Tokens de razoamento

544K

avg: 320K

Confianza promedia

96.9%

avg: 94.7%

Desglose por Materia

Alerxoloxía
Acertos
1
Erros
3
Non contestadas
0
Certeza
25.0%
Media
86.9%
Anestesioloxía e Reanimación
Acertos
1
Erros
5
Non contestadas
0
Certeza
16.7%
Media
81.3%
Cardioloxía
Acertos
7
Erros
15
Non contestadas
0
Certeza
31.8%
Media
77.4%
Coidados Paliativos
Acertos
1
Erros
3
Non contestadas
0
Certeza
25.0%
Media
77.2%
Dermatoloxía
Acertos
6
Erros
7
Non contestadas
0
Certeza
46.2%
Media
62.8%
Endocrinoloxía e Nutrición
Acertos
10
Erros
5
Non contestadas
1
Certeza
62.5%
Media
82.5%
Enfermidades Infecciosas
Acertos
11
Erros
16
Non contestadas
1
Certeza
39.3%
Media
71.1%
Epidemioloxía
Acertos
4
Erros
3
Non contestadas
0
Certeza
57.1%
Media
67.1%
Estatística
Acertos
3
Erros
0
Non contestadas
0
Certeza
100.0%
Media
74.9%
Farmacoloxía
Acertos
11
Erros
6
Non contestadas
0
Certeza
64.7%
Media
73.1%
Gastroenteroloxía
Acertos
8
Erros
13
Non contestadas
0
Certeza
38.1%
Media
72.9%
Hematoloxía
Acertos
9
Erros
2
Non contestadas
0
Certeza
81.8%
Media
81.8%
Inmunoloxía
Acertos
4
Erros
4
Non contestadas
1
Certeza
44.4%
Media
82.5%
Medicina Legal e Bioética
Acertos
3
Erros
2
Non contestadas
0
Certeza
60.0%
Media
67.2%
Nefroloxía
Acertos
10
Erros
5
Non contestadas
0
Certeza
66.7%
Media
78.2%
Neuroloxía
Acertos
11
Erros
8
Non contestadas
1
Certeza
55.0%
Media
76.2%
Oftalmoloxía
Acertos
1
Erros
4
Non contestadas
0
Certeza
20.0%
Media
72.6%
Oncoloxía Médica
Acertos
17
Erros
8
Non contestadas
0
Certeza
68.0%
Media
86.3%
ORL
Acertos
3
Erros
5
Non contestadas
0
Certeza
37.5%
Media
73.8%
Pediatría
Acertos
8
Erros
16
Non contestadas
1
Certeza
32.0%
Media
72.7%
Planificación e Xestión Sanitaria
Acertos
1
Erros
1
Non contestadas
0
Certeza
50.0%
Media
81.6%
Pneumoloxía
Acertos
4
Erros
10
Non contestadas
0
Certeza
28.6%
Media
73.0%
Psiquiatría
Acertos
6
Erros
2
Non contestadas
0
Certeza
75.0%
Media
82.0%
Radioloxía-Urxencias
Acertos
7
Erros
7
Non contestadas
0
Certeza
50.0%
Media
67.9%
Reumatoloxía
Acertos
5
Erros
9
Non contestadas
0
Certeza
35.7%
Media
74.6%
Traumatoloxía
Acertos
8
Erros
9
Non contestadas
1
Certeza
44.4%
Media
78.2%
Uroloxía
Acertos
4
Erros
3
Non contestadas
0
Certeza
57.1%
Media
79.5%
Xenética
Acertos
2
Erros
4
Non contestadas
0
Certeza
33.3%
Media
68.2%
Xeriatría
Acertos
5
Erros
6
Non contestadas
0
Certeza
45.5%
Media
71.2%
Xinecoloxía e Obstetricia
Acertos
13
Erros
6
Non contestadas
0
Certeza
68.4%
Media
85.9%

Desglose por Tipo de Pregunta

Anatomía
Acertos
3
Erros
3
Non contestadas
1
Certeza
42.9%
Media
77.1%
Bioestatística
Acertos
4
Erros
0
Non contestadas
0
Certeza
100.0%
Media
78.4%
Diagnóstico
Acertos
44
Erros
44
Non contestadas
1
Certeza
49.4%
Media
77.9%
Epidemioloxía
Acertos
2
Erros
3
Non contestadas
0
Certeza
40.0%
Media
75.0%
Ética
Acertos
1
Erros
2
Non contestadas
0
Certeza
33.3%
Media
72.0%
Farmacoloxía
Acertos
10
Erros
3
Non contestadas
0
Certeza
76.9%
Media
82.4%
Fisiopatoloxía
Acertos
11
Erros
14
Non contestadas
2
Certeza
40.7%
Media
72.6%
Interpretación
Acertos
18
Erros
23
Non contestadas
1
Certeza
42.9%
Media
69.3%
Legal
Acertos
3
Erros
1
Non contestadas
0
Certeza
75.0%
Media
63.6%
Prevención
Acertos
5
Erros
7
Non contestadas
0
Certeza
41.7%
Media
74.5%
Probas
Acertos
15
Erros
10
Non contestadas
1
Certeza
57.7%
Media
76.3%
Prognóstico
Acertos
2
Erros
4
Non contestadas
0
Certeza
33.3%
Media
77.8%
Risco
Acertos
1
Erros
4
Non contestadas
0
Certeza
20.0%
Media
84.3%
Tratamento
Acertos
40
Erros
41
Non contestadas
1
Certeza
48.8%
Media
75.2%
#RespostaCorrectaEstado
1BB
2AA
3DC
4DB
5AA
6CC
7BC
8CA
9CA
10AD
11DD
12CD
13AB
14BD
15C
16DB
17AB
18CA
19BC
20AA
21BB
22DD
23C
24BD
25CC
26DAnulada
27BC
28DAnulada
29BD
30BB
31DD
32AA
33DD
34AD
35BB
36BD
37DC
38BC
39DD
40AA
41DD
42CC
43DB
44DD
45DD
46AA
47AA
48AA
49BD
50BB
51DC
52CB
53AD
54DB
55CA
56BAnulada
57CC
58BB
59DD
60BA
61BA
62DD
63BB
64BD
65CA
66AA
67BB
68DB
69AB
70DA
71CD
72CA
73BD
74CC
75AA
76BB
77BB
78BB
79DC
80CC
81AC
82CD
83BB
84DD
85DC
86BC
87CA
88DD
89CB
90AA
91B
92DC
93BB
94AC
95AA
96DC
97DD
98DC
99BA
100BC
101AB
102DD
103AA
104BC
105AA
106CC
107CB
108BD
109BB
110CC
111BA
112BC
113AB
114AD
115BD
116CC
117AA
118CD
119CC
120DB
121AD
122AC
123CC
124BC
125BD
126DD
127BB
128DD
129BA
130DD
131DD
132AA
133AB
134CC
135CB
136DC
137AA
138DD
139DD
140BB
141AA
142AA
143BB
144BB
145DD
146CC
147DB
148DA
149CA
150DA
151AA
152AA
153B
154BB
155AB
156CC
157AA
158CC
159CC
160BA
161CA
162C
163CD
164CC
165AA
166BB
167AC
168BD
169CB
170AB
171DC
172BA
173DA
174CB
175CB
176AC
177CC
178BA
179DD
180AA
181BB
182BC
183DB
184BB
185DB
186DAnulada
187CC
188DD
189BD
190AA
191AB
192BA
193CC
194CA
195AA
196AA
197BB
198BC
199DD
200CC
201B
202BA
203DD
204BC
205BB
206CD
207AA
208CC
209CC
210BB