MedicalBenchmark
Meta: Llama 3.2 1B Instruct provider

Llama 3.2 1B Instruct

287

#287 de 290 modelosMIR 2025

Pontuação líquida

6.66 pts

Exatidão

14.5%

Corretas / Incorretas

29 / 67

Custo total

$0.03

Desempenho Geral

(vs. média)
Exatidão

14.5%

avg: 75.9%

Pontuação líquida

6.66 pts

avg: 138.99 pts

Acertos

29

avg: 152

Erros

67

avg: 38

Custo total

$0.03

avg: $3.59

Tempo médio de resposta

4.9s

avg: 18.1s

Tokens de saída

121K

avg: 443K

Tokens de raciocínio

0

avg: 320K

Confiança média

47.1%

avg: 94.7%

Desagregação por Disciplina

Alergologia
Acertos
0
Erros
0
Sem resposta
4
Exatidão
0.0%
Média
86.9%
Anestesiologia e Reanimação
Acertos
2
Erros
2
Sem resposta
2
Exatidão
33.3%
Média
81.3%
Cardiologia
Acertos
1
Erros
8
Sem resposta
13
Exatidão
4.5%
Média
77.4%
Cuidados Paliativos
Acertos
0
Erros
1
Sem resposta
3
Exatidão
0.0%
Média
77.2%
Dermatologia
Acertos
1
Erros
5
Sem resposta
7
Exatidão
7.7%
Média
62.8%
Doenças Infecciosas
Acertos
4
Erros
11
Sem resposta
13
Exatidão
14.3%
Média
71.1%
Endocrinologia e Nutrição
Acertos
2
Erros
7
Sem resposta
7
Exatidão
12.5%
Média
82.5%
Epidemiologia
Acertos
1
Erros
4
Sem resposta
2
Exatidão
14.3%
Média
67.1%
Estatística
Acertos
1
Erros
2
Sem resposta
0
Exatidão
33.3%
Média
74.9%
Farmacologia
Acertos
1
Erros
5
Sem resposta
11
Exatidão
5.9%
Média
73.1%
Gastrenterologia
Acertos
4
Erros
10
Sem resposta
7
Exatidão
19.0%
Média
72.9%
Genética
Acertos
3
Erros
1
Sem resposta
2
Exatidão
50.0%
Média
68.2%
Geriatria
Acertos
1
Erros
3
Sem resposta
7
Exatidão
9.1%
Média
71.2%
Ginecologia e Obstetrícia
Acertos
3
Erros
7
Sem resposta
9
Exatidão
15.8%
Média
85.9%
Hematologia
Acertos
3
Erros
2
Sem resposta
6
Exatidão
27.3%
Média
81.8%
Imunologia
Acertos
3
Erros
2
Sem resposta
4
Exatidão
33.3%
Média
82.5%
Medicina Legal e Bioética
Acertos
1
Erros
2
Sem resposta
2
Exatidão
20.0%
Média
67.2%
Nefrologia
Acertos
0
Erros
4
Sem resposta
11
Exatidão
0.0%
Média
78.2%
Neurologia
Acertos
4
Erros
6
Sem resposta
10
Exatidão
20.0%
Média
76.2%
Oftalmologia
Acertos
2
Erros
1
Sem resposta
2
Exatidão
40.0%
Média
72.6%
Oncologia Médica
Acertos
7
Erros
8
Sem resposta
10
Exatidão
28.0%
Média
86.3%
ORL
Acertos
2
Erros
4
Sem resposta
2
Exatidão
25.0%
Média
73.8%
Pediatria
Acertos
4
Erros
10
Sem resposta
11
Exatidão
16.0%
Média
72.7%
Planeamento e Gestão em Saúde
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
81.6%
Pneumologia
Acertos
0
Erros
5
Sem resposta
9
Exatidão
0.0%
Média
73.0%
Psiquiatria
Acertos
4
Erros
2
Sem resposta
2
Exatidão
50.0%
Média
82.0%
Radiologia-Urgências
Acertos
1
Erros
5
Sem resposta
8
Exatidão
7.1%
Média
67.9%
Reumatologia
Acertos
1
Erros
2
Sem resposta
11
Exatidão
7.1%
Média
74.6%
Traumatologia
Acertos
2
Erros
6
Sem resposta
10
Exatidão
11.1%
Média
78.2%
Urologia
Acertos
0
Erros
4
Sem resposta
3
Exatidão
0.0%
Média
79.5%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
2
Erros
2
Sem resposta
3
Exatidão
28.6%
Média
77.1%
Bioestatística
Acertos
1
Erros
3
Sem resposta
0
Exatidão
25.0%
Média
78.4%
Diagnóstico
Acertos
15
Erros
25
Sem resposta
49
Exatidão
16.9%
Média
77.9%
Epidemiologia
Acertos
1
Erros
3
Sem resposta
1
Exatidão
20.0%
Média
75.0%
Ética
Acertos
0
Erros
1
Sem resposta
2
Exatidão
0.0%
Média
72.0%
Exames
Acertos
5
Erros
10
Sem resposta
11
Exatidão
19.2%
Média
76.3%
Farmacologia
Acertos
3
Erros
4
Sem resposta
6
Exatidão
23.1%
Média
82.4%
Fisiopatologia
Acertos
4
Erros
15
Sem resposta
8
Exatidão
14.8%
Média
72.6%
Interpretação
Acertos
5
Erros
12
Sem resposta
25
Exatidão
11.9%
Média
69.3%
Legal
Acertos
1
Erros
2
Sem resposta
1
Exatidão
25.0%
Média
63.6%
Prevenção
Acertos
2
Erros
4
Sem resposta
6
Exatidão
16.7%
Média
74.5%
Prognóstico
Acertos
1
Erros
3
Sem resposta
2
Exatidão
16.7%
Média
77.8%
Risco
Acertos
0
Erros
4
Sem resposta
1
Exatidão
0.0%
Média
84.3%
Tratamento
Acertos
8
Erros
24
Sem resposta
50
Exatidão
9.8%
Média
75.2%
#RespostaCorretaEstado
1BB
2AA
3AC
4DB
5A
6CC
7BC
8BA
9A
10D
11D
12D
13B
14D
15B
16B
17B
18A
19C
20A
21B
22D
23C
24AD
25C
26BAnulada
27C
28CAnulada
29AD
30DB
31AD
32A
33DD
34CD
35BB
36AD
37CC
38C
39D
40AA
41CD
42AC
43B
44CD
45AD
46AA
47A
48AA
49DD
50BB
51BC
52B
53BD
54B
55CA
56Anulada
57C
58BB
59D
60A
61A
62AD
63B
64BD
65A
66A
67B
68B
69B
70CA
71D
72AA
73DD
74BC
75BA
76B
77BB
78AB
79C
80AC
81CC
82D
83BB
84AD
85C
86DC
87A
88D
89B
90BA
91B
92AC
93B
94C
95A
96C
97D
98C
99CA
100C
101B
102CD
103BA
104C
105A
106C
107CB
108D
109B
110C
111DA
112C
113B
114BD
115D
116AC
117BA
118CD
119CC
120B
121DD
122C
123C
124CC
125BD
126CD
127BB
128BD
129BA
130D
131D
132BA
133B
134C
135B
136C
137BA
138D
139AD
140DB
141BA
142AA
143B
144BB
145D
146C
147CB
148A
149A
150A
151A
152A
153BB
154CB
155B
156C
157A
158C
159CC
160A
161BA
162B
163D
164BC
165A
166B
167AC
168D
169B
170CB
171CC
172BA
173A
174B
175B
176CC
177C
178BA
179CD
180AA
181AB
182C
183DB
184AB
185B
186Anulada
187AC
188AD
189D
190CA
191B
192A
193C
194AA
195A
196BA
197B
198C
199D
200BC
201CB
202A
203AD
204C
205AB
206CD
207A
208C
209CC
210B