MedicalBenchmark
AllenAI: Olmo 3 7B Think provider

Olmo 3 7B Think

287

#287 de 319 modelsMIR 2025

Puntuació neta

66.33 pts

Certesa

49.5%

Correctes / Incorrectes

99 / 98

Cost total

$0.14

Rendiment General

(vs. mitjana)
Certesa

49.5%

avg: 77.9%

Puntuació neta

66.33 pts

avg: 143.96 pts

Encerts

99

avg: 156

Errors

98

avg: 35

Cost total

$0.14

avg: $3.36

Temps mitjà de resposta

15.3s

avg: 19.0s

Tokens eixints

613K

avg: 430K

Tokens de raonament

547K

avg: 306K

Confiança mitjana

97.3%

avg: 95.2%

Desglossament per Assignatura

Al·lergologia
Encerts
1
Errors
3
No contestades
0
Certesa
25.0%
Mitjana
87.9%
Anestesiologia i Reanimació
Encerts
1
Errors
5
No contestades
0
Certesa
16.7%
Mitjana
82.3%
Cardiologia
Encerts
7
Errors
15
No contestades
0
Certesa
31.8%
Mitjana
78.6%
Cures Pal·liatives
Encerts
1
Errors
3
No contestades
0
Certesa
25.0%
Mitjana
78.6%
Dermatologia
Encerts
6
Errors
6
No contestades
0
Certesa
50.0%
Mitjana
69.4%
Endocrinologia i Nutrició
Encerts
10
Errors
5
No contestades
1
Certesa
62.5%
Mitjana
83.5%
Epidemiologia
Encerts
4
Errors
3
No contestades
0
Certesa
57.1%
Mitjana
69.1%
Estadística
Encerts
3
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
76.6%
Farmacologia
Encerts
11
Errors
6
No contestades
0
Certesa
64.7%
Mitjana
74.1%
Gastroenterologia
Encerts
8
Errors
13
No contestades
0
Certesa
38.1%
Mitjana
74.1%
Genètica
Encerts
2
Errors
4
No contestades
0
Certesa
33.3%
Mitjana
69.5%
Geriatria
Encerts
6
Errors
5
No contestades
0
Certesa
54.5%
Mitjana
77.5%
Ginecologia i Obstetrícia
Encerts
13
Errors
6
No contestades
0
Certesa
68.4%
Mitjana
86.7%
Hematologia
Encerts
9
Errors
2
No contestades
0
Certesa
81.8%
Mitjana
82.7%
Immunologia
Encerts
4
Errors
4
No contestades
1
Certesa
44.4%
Mitjana
83.3%
Malalties Infeccioses
Encerts
12
Errors
15
No contestades
0
Certesa
44.4%
Mitjana
74.9%
Medicina Legal i Bioètica
Encerts
3
Errors
2
No contestades
0
Certesa
60.0%
Mitjana
68.4%
Nefrologia
Encerts
10
Errors
4
No contestades
0
Certesa
71.4%
Mitjana
84.8%
Neurologia
Encerts
11
Errors
8
No contestades
1
Certesa
55.0%
Mitjana
77.3%
Oftalmologia
Encerts
1
Errors
4
No contestades
0
Certesa
20.0%
Mitjana
74.2%
Oncologia Mèdica
Encerts
17
Errors
8
No contestades
0
Certesa
68.0%
Mitjana
87.2%
ORL
Encerts
3
Errors
5
No contestades
0
Certesa
37.5%
Mitjana
74.8%
Pediatria
Encerts
9
Errors
17
No contestades
0
Certesa
34.6%
Mitjana
71.9%
Planificació i Gestió Sanitària
Encerts
1
Errors
1
No contestades
0
Certesa
50.0%
Mitjana
82.6%
Pneumologia
Encerts
5
Errors
9
No contestades
0
Certesa
35.7%
Mitjana
80.4%
Psiquiatria
Encerts
6
Errors
2
No contestades
0
Certesa
75.0%
Mitjana
83.0%
Radiologia-Urgències
Encerts
7
Errors
7
No contestades
0
Certesa
50.0%
Mitjana
69.4%
Reumatologia
Encerts
6
Errors
9
No contestades
0
Certesa
40.0%
Mitjana
76.6%
Traumatologia
Encerts
8
Errors
9
No contestades
1
Certesa
44.4%
Mitjana
79.3%
Urologia
Encerts
4
Errors
3
No contestades
0
Certesa
57.1%
Mitjana
80.7%

Desglossament per Tipus de Pregunta

Anatomia
Encerts
3
Errors
3
No contestades
1
Certesa
42.9%
Mitjana
78.6%
Bioestadística
Encerts
4
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
79.8%
Diagnòstic
Encerts
44
Errors
43
No contestades
1
Certesa
50.0%
Mitjana
79.9%
Epidemiologia
Encerts
2
Errors
3
No contestades
0
Certesa
40.0%
Mitjana
76.7%
Ètica
Encerts
1
Errors
2
No contestades
0
Certesa
33.3%
Mitjana
74.1%
Farmacologia
Encerts
10
Errors
3
No contestades
0
Certesa
76.9%
Mitjana
83.3%
Fisiopatologia
Encerts
12
Errors
13
No contestades
2
Certesa
44.4%
Mitjana
76.1%
Interpretació
Encerts
18
Errors
23
No contestades
1
Certesa
42.9%
Mitjana
70.7%
Legal
Encerts
3
Errors
1
No contestades
0
Certesa
75.0%
Mitjana
64.6%
Prevenció
Encerts
5
Errors
7
No contestades
0
Certesa
41.7%
Mitjana
75.6%
Pronòstic
Encerts
3
Errors
4
No contestades
0
Certesa
42.9%
Mitjana
80.8%
Proves
Encerts
17
Errors
10
No contestades
0
Certesa
63.0%
Mitjana
77.9%
Risc
Encerts
1
Errors
4
No contestades
0
Certesa
20.0%
Mitjana
85.2%
Tractament
Encerts
41
Errors
40
No contestades
0
Certesa
50.6%
Mitjana
77.3%
#RespostaCorrectaEstat
1BB
2AA
3DC
4DB
5AA
6CC
7BC
8CA
9CA
10AD
11DD
12CD
13AB
14BD
15CAnul·lada
16DB
17AB
18CA
19BC
20AA
21BB
22DD
23C
24BD
25CC
26DAnul·lada
27BC
28DAnul·lada
29BD
30BB
31DD
32AA
33DD
34AD
35BB
36BD
37DC
38BC
39DD
40AA
41DD
42CC
43DB
44DD
45DD
46AA
47AA
48AA
49BD
50BB
51DC
52CB
53AD
54DB
55CA
56BAnul·lada
57CC
58BB
59DD
60BA
61BA
62DD
63BB
64BD
65CA
66AA
67BB
68DB
69AB
70DA
71CD
72CA
73BD
74CC
75AA
76BB
77BB
78BB
79DC
80CC
81AC
82CD
83BB
84DD
85DC
86BC
87CA
88DD
89CB
90AA
91B
92DC
93BB
94AC
95AA
96DC
97DD
98DC
99BA
100BC
101AB
102DD
103AA
104BC
105AA
106CC
107CB
108BD
109BB
110CC
111BA
112BC
113AB
114AD
115BD
116CC
117AA
118CD
119CC
120DB
121AD
122AC
123CC
124BC
125BD
126DD
127BB
128DD
129BA
130DD
131DD
132AA
133AB
134CC
135CB
136DC
137AA
138DD
139DD
140BB
141AA
142AA
143BB
144BB
145DD
146CC
147DB
148DA
149CA
150DD
151AA
152AA
153B
154BB
155AB
156CC
157AA
158CC
159CC
160BA
161CA
162CAnul·lada
163CD
164CC
165AA
166BB
167AC
168BD
169CB
170AB
171DC
172BA
173DA
174CB
175CB
176AC
177CC
178BA
179DD
180AA
181BB
182BC
183DB
184BB
185DB
186DAnul·lada
187CC
188DD
189BD
190AA
191AB
192BA
193CC
194CA
195AA
196AA
197BB
198BC
199DD
200CC
201BB
202BA
203DD
204BC
205BB
206CD
207AA
208CC
209CC
210BB