MedicalBenchmark
Meta: Llama 3 8B Instruct provider

Llama 3 8B Instruct

263

#263 de 290 modelosMIR 2026

Pontuação líquida

73.00 pts

Exatidão

49.5%

Corretas / Incorretas

99 / 78

Custo total

$0.01

Desempenho Geral

(vs. média)
Exatidão

49.5%

avg: 81.6%

Pontuação líquida

73.00 pts

avg: 154.00 pts

Acertos

99

avg: 163

Erros

78

avg: 28

Custo total

$0.01

avg: $3.33

Tempo médio de resposta

11.4s

avg: 16.2s

Tokens de saída

151K

avg: 430K

Tokens de raciocínio

0

avg: 310K

Confiança média

85.5%

avg: 95.1%

Desagregação por Disciplina

Alergologia
Acertos
1
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
96.9%
Anestesiologia e Reanimação
Acertos
2
Erros
4
Sem resposta
1
Exatidão
28.6%
Média
69.6%
Cardiologia
Acertos
8
Erros
11
Sem resposta
6
Exatidão
32.0%
Média
77.3%
Cuidados Paliativos
Acertos
6
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
80.2%
Dermatologia
Acertos
3
Erros
6
Sem resposta
2
Exatidão
27.3%
Média
72.3%
Doenças Infecciosas
Acertos
7
Erros
7
Sem resposta
0
Exatidão
50.0%
Média
77.9%
Endocrinologia e Nutrição
Acertos
8
Erros
6
Sem resposta
1
Exatidão
53.3%
Média
84.0%
Epidemiologia
Acertos
6
Erros
0
Sem resposta
1
Exatidão
85.7%
Média
80.2%
Estatística
Acertos
1
Erros
0
Sem resposta
1
Exatidão
50.0%
Média
83.8%
Farmacologia
Acertos
3
Erros
8
Sem resposta
0
Exatidão
27.3%
Média
78.6%
Gastrenterologia
Acertos
15
Erros
14
Sem resposta
1
Exatidão
50.0%
Média
79.3%
Genética
Acertos
4
Erros
5
Sem resposta
2
Exatidão
36.4%
Média
78.7%
Geriatria
Acertos
5
Erros
4
Sem resposta
4
Exatidão
38.5%
Média
83.0%
Ginecologia e Obstetrícia
Acertos
5
Erros
5
Sem resposta
2
Exatidão
41.7%
Média
84.3%
Hematologia
Acertos
2
Erros
5
Sem resposta
2
Exatidão
22.2%
Média
76.6%
Imunologia
Acertos
5
Erros
1
Sem resposta
0
Exatidão
83.3%
Média
91.4%
Medicina Legal e Bioética
Acertos
9
Erros
1
Sem resposta
1
Exatidão
81.8%
Média
82.9%
Nefrologia
Acertos
6
Erros
4
Sem resposta
0
Exatidão
60.0%
Média
85.1%
Neurologia
Acertos
7
Erros
3
Sem resposta
3
Exatidão
53.8%
Média
88.6%
Oftalmologia
Acertos
2
Erros
3
Sem resposta
0
Exatidão
40.0%
Média
83.7%
Oncologia Médica
Acertos
14
Erros
8
Sem resposta
1
Exatidão
60.9%
Média
83.0%
ORL
Acertos
5
Erros
2
Sem resposta
1
Exatidão
62.5%
Média
84.7%
Pediatria
Acertos
15
Erros
5
Sem resposta
2
Exatidão
68.2%
Média
87.6%
Planeamento e Gestão em Saúde
Acertos
7
Erros
2
Sem resposta
1
Exatidão
70.0%
Média
78.4%
Pneumologia
Acertos
7
Erros
8
Sem resposta
1
Exatidão
43.8%
Média
82.8%
Psiquiatria
Acertos
3
Erros
4
Sem resposta
1
Exatidão
37.5%
Média
87.9%
Radiologia-Urgências
Acertos
3
Erros
8
Sem resposta
2
Exatidão
23.1%
Média
67.7%
Reumatologia
Acertos
6
Erros
4
Sem resposta
1
Exatidão
54.5%
Média
88.4%
Traumatologia
Acertos
3
Erros
6
Sem resposta
2
Exatidão
27.3%
Média
65.2%
Urologia
Acertos
7
Erros
1
Sem resposta
0
Exatidão
87.5%
Média
82.5%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
82.6%
Bioestatística
Acertos
1
Erros
0
Sem resposta
1
Exatidão
50.0%
Média
83.8%
Diagnóstico
Acertos
34
Erros
37
Sem resposta
10
Exatidão
42.0%
Média
82.2%
Epidemiologia
Acertos
8
Erros
0
Sem resposta
1
Exatidão
88.9%
Média
88.7%
Ética
Acertos
5
Erros
0
Sem resposta
1
Exatidão
83.3%
Média
92.0%
Exames
Acertos
10
Erros
17
Sem resposta
6
Exatidão
30.3%
Média
80.3%
Farmacologia
Acertos
6
Erros
8
Sem resposta
1
Exatidão
40.0%
Média
82.3%
Fisiopatologia
Acertos
15
Erros
7
Sem resposta
4
Exatidão
57.7%
Média
84.3%
Interpretação
Acertos
11
Erros
21
Sem resposta
5
Exatidão
29.7%
Média
72.0%
Legal
Acertos
6
Erros
1
Sem resposta
2
Exatidão
66.7%
Média
82.4%
Prevenção
Acertos
9
Erros
6
Sem resposta
1
Exatidão
56.3%
Média
80.6%
Prognóstico
Acertos
5
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
93.2%
Risco
Acertos
10
Erros
5
Sem resposta
0
Exatidão
66.7%
Média
84.3%
Tratamento
Acertos
33
Erros
33
Sem resposta
6
Exatidão
45.8%
Média
80.1%
#RespostaCorretaEstado
1BA
2BB
3AD
4CD
5BB
6DC
7AB
8BD
9D
10BA
11B
12CA
13AAnulada
14AC
15DA
16CC
17BC
18BD
19BB
20DB
21CB
22AC
23BB
24DA
25CC
26CA
27BB
28DD
29AA
30DD
31CC
32CC
33B
34BB
35BC
36BD
37CD
38DA
39AC
40AA
41DD
42BA
43BB
44BB
45BB
46BB
47DD
48CC
49CC
50DAnulada
51CA
52AC
53CC
54AC
55BA
56CA
57A
58BA
59AB
60CB
61C
62CB
63BB
64CAnulada
65CC
66DC
67AC
68AA
69CB
70BB
71BB
72B
73BB
74AA
75CC
76CC
77CA
78DD
79AA
80AD
81CC
82DD
83B
84AA
85DD
86AA
87BB
88BB
89B
90CC
91BA
92CC
93AD
94AC
95CC
96CB
97BB
98AA
99BB
100CC
101C
102AA
103CC
104CC
105CC
106AB
107DC
108AA
109AC
110AC
111AB
112AC
113C
114AD
115AB
116CD
117BC
118DB
119AA
120A
121C
122BB
123B
124BB
125CC
126B
127CC
128BB
129CC
130CC
131BB
132CB
133C
134B
135CC
136CB
137CD
138BB
139Anulada
140CD
141AA
142CAnulada
143BA
144BD
145CC
146DC
147BB
148CC
149BB
150DB
151BB
152CC
153BC
154CD
155B
156DA
157DD
158BB
159C
160AA
161Anulada
162AA
163AC
164AC
165A
166AA
167DD
168CC
169AB
170BB
171AA
172B
173AD
174AC
175BB
176A
177AD
178BD
179AB
180BC
181BB
182CC
183DD
184DD
185DB
186DD
187DD
188CC
189CC
190AB
191DD
192AD
193CC
194CC
195DD
196DA
197CC
198BA
199B
200DD
201CC
202A
203AA
204CC
205BB
206BC
207A
208AAnulada
209CB
210CC