MedicalBenchmark
AllenAI: Olmo 3 7B Think provider

Olmo 3 7B Think

255

#255 de 290 modelosMIR 2026

Pontuação líquida

93.66 pts

Exatidão

60.0%

Corretas / Incorretas

120 / 79

Custo total

$0.14

Desempenho Geral

(vs. média)
Exatidão

60.0%

avg: 81.6%

Pontuação líquida

93.66 pts

avg: 154.00 pts

Acertos

120

avg: 163

Erros

79

avg: 28

Custo total

$0.14

avg: $3.33

Tempo médio de resposta

15.3s

avg: 16.2s

Tokens de saída

612K

avg: 430K

Tokens de raciocínio

515K

avg: 310K

Confiança média

97.8%

avg: 95.1%

Desagregação por Disciplina

Alergologia
Acertos
0
Erros
1
Sem resposta
0
Exatidão
0.0%
Média
96.9%
Anestesiologia e Reanimação
Acertos
5
Erros
2
Sem resposta
0
Exatidão
71.4%
Média
69.6%
Cardiologia
Acertos
13
Erros
12
Sem resposta
0
Exatidão
52.0%
Média
77.3%
Cuidados Paliativos
Acertos
2
Erros
4
Sem resposta
0
Exatidão
33.3%
Média
80.2%
Dermatologia
Acertos
7
Erros
4
Sem resposta
0
Exatidão
63.6%
Média
72.3%
Doenças Infecciosas
Acertos
7
Erros
7
Sem resposta
0
Exatidão
50.0%
Média
77.9%
Endocrinologia e Nutrição
Acertos
8
Erros
7
Sem resposta
0
Exatidão
53.3%
Média
84.0%
Epidemiologia
Acertos
6
Erros
1
Sem resposta
0
Exatidão
85.7%
Média
80.2%
Estatística
Acertos
2
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
83.8%
Farmacologia
Acertos
4
Erros
7
Sem resposta
0
Exatidão
36.4%
Média
78.6%
Gastrenterologia
Acertos
19
Erros
11
Sem resposta
0
Exatidão
63.3%
Média
79.3%
Genética
Acertos
7
Erros
4
Sem resposta
0
Exatidão
63.6%
Média
78.7%
Geriatria
Acertos
9
Erros
4
Sem resposta
0
Exatidão
69.2%
Média
83.0%
Ginecologia e Obstetrícia
Acertos
4
Erros
7
Sem resposta
1
Exatidão
33.3%
Média
84.3%
Hematologia
Acertos
6
Erros
3
Sem resposta
0
Exatidão
66.7%
Média
76.6%
Imunologia
Acertos
4
Erros
2
Sem resposta
0
Exatidão
66.7%
Média
91.4%
Medicina Legal e Bioética
Acertos
6
Erros
5
Sem resposta
0
Exatidão
54.5%
Média
82.9%
Nefrologia
Acertos
6
Erros
4
Sem resposta
0
Exatidão
60.0%
Média
85.1%
Neurologia
Acertos
10
Erros
3
Sem resposta
0
Exatidão
76.9%
Média
88.6%
Oftalmologia
Acertos
3
Erros
2
Sem resposta
0
Exatidão
60.0%
Média
83.7%
Oncologia Médica
Acertos
15
Erros
8
Sem resposta
0
Exatidão
65.2%
Média
83.0%
ORL
Acertos
3
Erros
5
Sem resposta
0
Exatidão
37.5%
Média
84.7%
Pediatria
Acertos
19
Erros
3
Sem resposta
0
Exatidão
86.4%
Média
87.6%
Planeamento e Gestão em Saúde
Acertos
4
Erros
6
Sem resposta
0
Exatidão
40.0%
Média
78.4%
Pneumologia
Acertos
11
Erros
5
Sem resposta
0
Exatidão
68.8%
Média
82.8%
Psiquiatria
Acertos
6
Erros
2
Sem resposta
0
Exatidão
75.0%
Média
87.9%
Radiologia-Urgências
Acertos
6
Erros
7
Sem resposta
0
Exatidão
46.2%
Média
67.7%
Reumatologia
Acertos
8
Erros
3
Sem resposta
0
Exatidão
72.7%
Média
88.4%
Traumatologia
Acertos
6
Erros
5
Sem resposta
0
Exatidão
54.5%
Média
65.2%
Urologia
Acertos
6
Erros
2
Sem resposta
0
Exatidão
75.0%
Média
82.5%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
82.6%
Bioestatística
Acertos
2
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
83.8%
Diagnóstico
Acertos
50
Erros
31
Sem resposta
0
Exatidão
61.7%
Média
82.2%
Epidemiologia
Acertos
8
Erros
1
Sem resposta
0
Exatidão
88.9%
Média
88.7%
Ética
Acertos
4
Erros
2
Sem resposta
0
Exatidão
66.7%
Média
92.0%
Exames
Acertos
16
Erros
16
Sem resposta
1
Exatidão
48.5%
Média
80.3%
Farmacologia
Acertos
8
Erros
7
Sem resposta
0
Exatidão
53.3%
Média
82.3%
Fisiopatologia
Acertos
17
Erros
9
Sem resposta
0
Exatidão
65.4%
Média
84.3%
Interpretação
Acertos
14
Erros
23
Sem resposta
0
Exatidão
37.8%
Média
72.0%
Legal
Acertos
4
Erros
5
Sem resposta
0
Exatidão
44.4%
Média
82.4%
Prevenção
Acertos
10
Erros
6
Sem resposta
0
Exatidão
62.5%
Média
80.6%
Prognóstico
Acertos
5
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
93.2%
Risco
Acertos
11
Erros
4
Sem resposta
0
Exatidão
73.3%
Média
84.3%
Tratamento
Acertos
42
Erros
29
Sem resposta
1
Exatidão
58.3%
Média
80.1%
#RespostaCorretaEstado
1CA
2BB
3AD
4AD
5BB
6BC
7BB
8BD
9CD
10AA
11AB
12CA
13AAnulada
14BC
15AA
16DC
17CC
18BD
19BB
20CB
21CB
22BC
23BB
24CA
25CC
26DA
27BB
28DD
29AA
30BD
31CC
32CC
33BB
34BB
35CC
36DD
37AD
38BA
39AC
40BA
41DD
42AA
43BB
44BB
45BB
46BB
47DD
48CC
49CC
50AAnulada
51AA
52BC
53CC
54AC
55BA
56CA
57A
58AA
59AB
60BB
61CC
62BB
63AB
64AAnulada
65DC
66DC
67BC
68AA
69BB
70BB
71AB
72BB
73DB
74AA
75CC
76CC
77AA
78DD
79AA
80DD
81CC
82CD
83BB
84CA
85DD
86AA
87BB
88BB
89DB
90CC
91BA
92CC
93AD
94DC
95CC
96BB
97BB
98AA
99BB
100DC
101AC
102AA
103CC
104CC
105CC
106AB
107AC
108BA
109CC
110BC
111AB
112AC
113DC
114DD
115BB
116BD
117BC
118CB
119AA
120AA
121AC
122AB
123DB
124BB
125AC
126BB
127AC
128BB
129DC
130CC
131BB
132AB
133CC
134BB
135CC
136BB
137CD
138BB
139CAnulada
140DD
141AA
142DAnulada
143BA
144DD
145AC
146AC
147BB
148AC
149BB
150BB
151DB
152CC
153CC
154BD
155BB
156AA
157DD
158BB
159BC
160AA
161CAnulada
162AA
163CC
164CC
165AA
166AA
167DD
168CC
169CB
170AB
171AA
172CB
173DD
174CC
175BB
176AA
177DD
178DD
179BB
180BC
181BB
182AC
183DD
184DD
185AB
186DD
187DD
188BC
189CC
190AB
191DD
192BD
193CC
194AC
195DD
196CA
197CC
198AA
199AB
200AD
201AC
202AA
203AA
204CC
205BB
206CC
207BA
208CAnulada
209AB
210CC