MedicalBenchmark
Meta: Llama 3.2 3B Instruct provider

Llama 3.2 3B Instruct

277

#277 de 290 modelosMIR 2025

Pontuação líquida

27.66 pts

Exatidão

31.5%

Corretas / Incorretas

63 / 106

Custo total

$0.01

Desempenho Geral

(vs. média)
Exatidão

31.5%

avg: 75.9%

Pontuação líquida

27.66 pts

avg: 138.99 pts

Acertos

63

avg: 152

Erros

106

avg: 38

Custo total

$0.01

avg: $3.59

Tempo médio de resposta

19.5s

avg: 18.1s

Tokens de saída

113K

avg: 443K

Tokens de raciocínio

0

avg: 320K

Confiança média

82.5%

avg: 94.7%

Desagregação por Disciplina

Alergologia
Acertos
1
Erros
3
Sem resposta
0
Exatidão
25.0%
Média
86.9%
Anestesiologia e Reanimação
Acertos
1
Erros
3
Sem resposta
2
Exatidão
16.7%
Média
81.3%
Cardiologia
Acertos
3
Erros
14
Sem resposta
5
Exatidão
13.6%
Média
77.4%
Cuidados Paliativos
Acertos
2
Erros
1
Sem resposta
1
Exatidão
50.0%
Média
77.2%
Dermatologia
Acertos
4
Erros
7
Sem resposta
2
Exatidão
30.8%
Média
62.8%
Doenças Infecciosas
Acertos
11
Erros
12
Sem resposta
5
Exatidão
39.3%
Média
71.1%
Endocrinologia e Nutrição
Acertos
9
Erros
4
Sem resposta
3
Exatidão
56.3%
Média
82.5%
Epidemiologia
Acertos
2
Erros
4
Sem resposta
1
Exatidão
28.6%
Média
67.1%
Estatística
Acertos
0
Erros
2
Sem resposta
1
Exatidão
0.0%
Média
74.9%
Farmacologia
Acertos
6
Erros
9
Sem resposta
2
Exatidão
35.3%
Média
73.1%
Gastrenterologia
Acertos
3
Erros
15
Sem resposta
3
Exatidão
14.3%
Média
72.9%
Genética
Acertos
1
Erros
3
Sem resposta
2
Exatidão
16.7%
Média
68.2%
Geriatria
Acertos
4
Erros
6
Sem resposta
1
Exatidão
36.4%
Média
71.2%
Ginecologia e Obstetrícia
Acertos
8
Erros
5
Sem resposta
6
Exatidão
42.1%
Média
85.9%
Hematologia
Acertos
4
Erros
5
Sem resposta
2
Exatidão
36.4%
Média
81.8%
Imunologia
Acertos
5
Erros
3
Sem resposta
1
Exatidão
55.6%
Média
82.5%
Medicina Legal e Bioética
Acertos
3
Erros
2
Sem resposta
0
Exatidão
60.0%
Média
67.2%
Nefrologia
Acertos
7
Erros
7
Sem resposta
1
Exatidão
46.7%
Média
78.2%
Neurologia
Acertos
7
Erros
7
Sem resposta
6
Exatidão
35.0%
Média
76.2%
Oftalmologia
Acertos
1
Erros
3
Sem resposta
1
Exatidão
20.0%
Média
72.6%
Oncologia Médica
Acertos
11
Erros
11
Sem resposta
3
Exatidão
44.0%
Média
86.3%
ORL
Acertos
0
Erros
7
Sem resposta
1
Exatidão
0.0%
Média
73.8%
Pediatria
Acertos
9
Erros
13
Sem resposta
3
Exatidão
36.0%
Média
72.7%
Planeamento e Gestão em Saúde
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
81.6%
Pneumologia
Acertos
3
Erros
10
Sem resposta
1
Exatidão
21.4%
Média
73.0%
Psiquiatria
Acertos
3
Erros
5
Sem resposta
0
Exatidão
37.5%
Média
82.0%
Radiologia-Urgências
Acertos
2
Erros
11
Sem resposta
1
Exatidão
14.3%
Média
67.9%
Reumatologia
Acertos
6
Erros
7
Sem resposta
1
Exatidão
42.9%
Média
74.6%
Traumatologia
Acertos
10
Erros
7
Sem resposta
1
Exatidão
55.6%
Média
78.2%
Urologia
Acertos
3
Erros
3
Sem resposta
1
Exatidão
42.9%
Média
79.5%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
3
Erros
3
Sem resposta
1
Exatidão
42.9%
Média
77.1%
Bioestatística
Acertos
0
Erros
3
Sem resposta
1
Exatidão
0.0%
Média
78.4%
Diagnóstico
Acertos
31
Erros
44
Sem resposta
14
Exatidão
34.8%
Média
77.9%
Epidemiologia
Acertos
2
Erros
3
Sem resposta
0
Exatidão
40.0%
Média
75.0%
Ética
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
72.0%
Exames
Acertos
8
Erros
15
Sem resposta
3
Exatidão
30.8%
Média
76.3%
Farmacologia
Acertos
4
Erros
7
Sem resposta
2
Exatidão
30.8%
Média
82.4%
Fisiopatologia
Acertos
10
Erros
14
Sem resposta
3
Exatidão
37.0%
Média
72.6%
Interpretação
Acertos
9
Erros
26
Sem resposta
7
Exatidão
21.4%
Média
69.3%
Legal
Acertos
2
Erros
2
Sem resposta
0
Exatidão
50.0%
Média
63.6%
Prevenção
Acertos
5
Erros
5
Sem resposta
2
Exatidão
41.7%
Média
74.5%
Prognóstico
Acertos
0
Erros
6
Sem resposta
0
Exatidão
0.0%
Média
77.8%
Risco
Acertos
2
Erros
1
Sem resposta
2
Exatidão
40.0%
Média
84.3%
Tratamento
Acertos
24
Erros
45
Sem resposta
13
Exatidão
29.3%
Média
75.2%
#RespostaCorretaEstado
1DB
2A
3DC
4AB
5A
6CC
7AC
8AA
9AA
10BD
11CD
12BD
13AB
14CD
15D
16AB
17AB
18CA
19BC
20CA
21CB
22AD
23C
24DD
25CC
26BAnulada
27AC
28DAnulada
29CD
30BB
31CD
32DA
33CD
34D
35BB
36BD
37CC
38BC
39DD
40BA
41D
42BC
43BB
44D
45CD
46A
47CA
48AA
49AD
50BB
51DC
52AB
53BD
54DB
55CA
56Anulada
57AC
58BB
59DD
60A
61A
62DD
63CB
64DD
65A
66AA
67BB
68AB
69DB
70BA
71DD
72CA
73CD
74DC
75AA
76CB
77BB
78BB
79C
80C
81C
82D
83AB
84D
85BC
86BC
87A
88BD
89BB
90AA
91BB
92CC
93BB
94CC
95AA
96CC
97D
98BC
99CA
100DC
101AB
102CD
103BA
104BC
105DA
106C
107BB
108BD
109AB
110CC
111CA
112C
113AB
114AD
115CD
116AC
117DA
118D
119AC
120B
121CD
122AC
123CC
124DC
125CD
126AD
127AB
128D
129CA
130BD
131DD
132AA
133AB
134CC
135B
136CC
137BA
138AD
139BD
140AB
141AA
142AA
143BB
144BB
145AD
146CC
147BB
148A
149DA
150DA
151AA
152AA
153BB
154BB
155BB
156C
157AA
158C
159AC
160BA
161AA
162
163BD
164CC
165DA
166CB
167C
168BD
169DB
170DB
171BC
172BA
173CA
174CB
175DB
176CC
177DC
178AA
179CD
180AA
181CB
182CC
183AB
184BB
185B
186Anulada
187CC
188CD
189DD
190AA
191B
192AA
193AC
194BA
195CA
196AA
197AB
198DC
199CD
200CC
201CB
202A
203DD
204DC
205AB
206CD
207BA
208AC
209CC
210B