MedicalBenchmark
AllenAI: Olmo 3.1 32B Instruct provider

Olmo 3.1 32B Instruct

251

#251 de 290 modelosMIR 2026

Pontuação líquida

103.00 pts

Exatidão

62.5%

Corretas / Incorretas

125 / 66

Custo total

$0.11

Desempenho Geral

(vs. média)
Exatidão

62.5%

avg: 81.6%

Pontuação líquida

103.00 pts

avg: 154.00 pts

Acertos

125

avg: 163

Erros

66

avg: 28

Custo total

$0.11

avg: $3.33

Tempo médio de resposta

12.0s

avg: 16.2s

Tokens de saída

142K

avg: 430K

Tokens de raciocínio

0

avg: 310K

Confiança média

94.4%

avg: 95.1%

Desagregação por Disciplina

Alergologia
Acertos
1
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
96.9%
Anestesiologia e Reanimação
Acertos
2
Erros
4
Sem resposta
1
Exatidão
28.6%
Média
69.6%
Cardiologia
Acertos
13
Erros
11
Sem resposta
1
Exatidão
52.0%
Média
77.3%
Cuidados Paliativos
Acertos
5
Erros
1
Sem resposta
0
Exatidão
83.3%
Média
80.2%
Dermatologia
Acertos
7
Erros
4
Sem resposta
0
Exatidão
63.6%
Média
72.3%
Doenças Infecciosas
Acertos
8
Erros
6
Sem resposta
0
Exatidão
57.1%
Média
77.9%
Endocrinologia e Nutrição
Acertos
9
Erros
6
Sem resposta
0
Exatidão
60.0%
Média
84.0%
Epidemiologia
Acertos
2
Erros
5
Sem resposta
0
Exatidão
28.6%
Média
80.2%
Estatística
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
83.8%
Farmacologia
Acertos
8
Erros
3
Sem resposta
0
Exatidão
72.7%
Média
78.6%
Gastrenterologia
Acertos
21
Erros
8
Sem resposta
1
Exatidão
70.0%
Média
79.3%
Genética
Acertos
8
Erros
2
Sem resposta
1
Exatidão
72.7%
Média
78.7%
Geriatria
Acertos
8
Erros
5
Sem resposta
0
Exatidão
61.5%
Média
83.0%
Ginecologia e Obstetrícia
Acertos
7
Erros
4
Sem resposta
1
Exatidão
58.3%
Média
84.3%
Hematologia
Acertos
4
Erros
5
Sem resposta
0
Exatidão
44.4%
Média
76.6%
Imunologia
Acertos
6
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
91.4%
Medicina Legal e Bioética
Acertos
9
Erros
2
Sem resposta
0
Exatidão
81.8%
Média
82.9%
Nefrologia
Acertos
5
Erros
5
Sem resposta
0
Exatidão
50.0%
Média
85.1%
Neurologia
Acertos
8
Erros
4
Sem resposta
1
Exatidão
61.5%
Média
88.6%
Oftalmologia
Acertos
3
Erros
2
Sem resposta
0
Exatidão
60.0%
Média
83.7%
Oncologia Médica
Acertos
11
Erros
10
Sem resposta
2
Exatidão
47.8%
Média
83.0%
ORL
Acertos
6
Erros
0
Sem resposta
2
Exatidão
75.0%
Média
84.7%
Pediatria
Acertos
14
Erros
8
Sem resposta
0
Exatidão
63.6%
Média
87.6%
Planeamento e Gestão em Saúde
Acertos
8
Erros
2
Sem resposta
0
Exatidão
80.0%
Média
78.4%
Pneumologia
Acertos
13
Erros
3
Sem resposta
0
Exatidão
81.3%
Média
82.8%
Psiquiatria
Acertos
6
Erros
2
Sem resposta
0
Exatidão
75.0%
Média
87.9%
Radiologia-Urgências
Acertos
4
Erros
7
Sem resposta
2
Exatidão
30.8%
Média
67.7%
Reumatologia
Acertos
8
Erros
3
Sem resposta
0
Exatidão
72.7%
Média
88.4%
Traumatologia
Acertos
3
Erros
6
Sem resposta
2
Exatidão
27.3%
Média
65.2%
Urologia
Acertos
5
Erros
3
Sem resposta
0
Exatidão
62.5%
Média
82.5%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
1
Erros
2
Sem resposta
0
Exatidão
33.3%
Média
82.6%
Bioestatística
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
83.8%
Diagnóstico
Acertos
47
Erros
30
Sem resposta
4
Exatidão
58.0%
Média
82.2%
Epidemiologia
Acertos
5
Erros
4
Sem resposta
0
Exatidão
55.6%
Média
88.7%
Ética
Acertos
6
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
92.0%
Exames
Acertos
22
Erros
9
Sem resposta
2
Exatidão
66.7%
Média
80.3%
Farmacologia
Acertos
11
Erros
4
Sem resposta
0
Exatidão
73.3%
Média
82.3%
Fisiopatologia
Acertos
18
Erros
7
Sem resposta
1
Exatidão
69.2%
Média
84.3%
Interpretação
Acertos
16
Erros
16
Sem resposta
5
Exatidão
43.2%
Média
72.0%
Legal
Acertos
8
Erros
1
Sem resposta
0
Exatidão
88.9%
Média
82.4%
Prevenção
Acertos
10
Erros
6
Sem resposta
0
Exatidão
62.5%
Média
80.6%
Prognóstico
Acertos
5
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
93.2%
Risco
Acertos
10
Erros
5
Sem resposta
0
Exatidão
66.7%
Média
84.3%
Tratamento
Acertos
44
Erros
25
Sem resposta
3
Exatidão
61.1%
Média
80.1%
#RespostaCorretaEstado
1A
2AB
3AD
4DD
5BB
6C
7CB
8D
9AD
10AA
11B
12CA
13CAnulada
14CC
15BA
16DC
17CC
18BD
19BB
20CB
21CB
22CC
23B
24AA
25CC
26AA
27BB
28DD
29CA
30DD
31DC
32CC
33DB
34DB
35CC
36BD
37BD
38DA
39CC
40BA
41AD
42BA
43BB
44BB
45BB
46BB
47DD
48CC
49CC
50AAnulada
51DA
52CC
53CC
54AC
55AA
56CA
57A
58AA
59AB
60BB
61CC
62BB
63AB
64CAnulada
65CC
66DC
67DC
68AA
69BB
70BB
71BB
72BB
73BB
74AA
75CC
76CC
77AA
78AD
79AA
80DD
81C
82DD
83BB
84DA
85DD
86AA
87BB
88AB
89BB
90CC
91BA
92AC
93DD
94BC
95CC
96AB
97BB
98AA
99BB
100CC
101CC
102AA
103CC
104CC
105CC
106BB
107DC
108BA
109CC
110AC
111BB
112CC
113CC
114DD
115BB
116DD
117BC
118AB
119DA
120AA
121AC
122BB
123BB
124DB
125CC
126BB
127DC
128BB
129DC
130CC
131BB
132AB
133CC
134BB
135CC
136BB
137CD
138BB
139CAnulada
140AD
141AA
142BAnulada
143BA
144BD
145CC
146AC
147BB
148CC
149BB
150BB
151BB
152CC
153CC
154CD
155BB
156AA
157DD
158BB
159CC
160AA
161CAnulada
162AA
163CC
164CC
165DA
166AA
167DD
168CC
169B
170AB
171AA
172AB
173DD
174CC
175BB
176AA
177CD
178BD
179BB
180AC
181BB
182CC
183AD
184DD
185DB
186DD
187DD
188CC
189CC
190AB
191BD
192BD
193CC
194AC
195DD
196AA
197DC
198A
199AB
200DD
201CC
202BA
203AA
204CC
205BB
206CC
207AA
208CAnulada
209AB
210CC