MedicalBenchmark
Meta: Llama 3.2 11B Vision Instruct provider

Llama 3.2 11B Vision Instruct

304

#304 de 319 modelos — MIR 2025

Pontuação líquida

30.33 pts

Exatidão

23.0%

Corretas / Incorretas

46 / 47

Custo total

$0.04

Desempenho Geral

(vs. média)
Exatidão

23.0%

avg: 77.9%

Pontuação líquida

30.33 pts

avg: 143.96 pts

Acertos

46

avg: 156

Erros

47

avg: 35

Custo total

$0.04

avg: $3.36

Tempo médio de resposta

50.8s

avg: 19.0s

Tokens de saída

171K

avg: 430K

Tokens de raciocínio

0

avg: 306K

Confiança média

45.4%

avg: 95.2%

Desagregação por Disciplina

Alergologia
Acertos
0
Erros
2
Sem resposta
2
Exatidão
0.0%
Média
87.9%
Anestesiologia e Reanimação
Acertos
3
Erros
1
Sem resposta
2
Exatidão
50.0%
Média
82.3%
Cardiologia
Acertos
1
Erros
4
Sem resposta
17
Exatidão
4.5%
Média
78.6%
Cuidados Paliativos
Acertos
1
Erros
1
Sem resposta
2
Exatidão
25.0%
Média
78.6%
Dermatologia
Acertos
5
Erros
4
Sem resposta
3
Exatidão
41.7%
Média
69.4%
Doenças Infecciosas
Acertos
8
Erros
5
Sem resposta
14
Exatidão
29.6%
Média
74.9%
Endocrinologia e Nutrição
Acertos
4
Erros
1
Sem resposta
11
Exatidão
25.0%
Média
83.5%
Epidemiologia
Acertos
0
Erros
2
Sem resposta
5
Exatidão
0.0%
Média
69.1%
Estatística
Acertos
0
Erros
2
Sem resposta
1
Exatidão
0.0%
Média
76.6%
Farmacologia
Acertos
9
Erros
2
Sem resposta
6
Exatidão
52.9%
Média
74.1%
Gastrenterologia
Acertos
8
Erros
4
Sem resposta
9
Exatidão
38.1%
Média
74.1%
Genética
Acertos
0
Erros
2
Sem resposta
4
Exatidão
0.0%
Média
69.5%
Geriatria
Acertos
2
Erros
4
Sem resposta
5
Exatidão
18.2%
Média
77.5%
Ginecologia e Obstetrícia
Acertos
5
Erros
4
Sem resposta
10
Exatidão
26.3%
Média
86.7%
Hematologia
Acertos
1
Erros
3
Sem resposta
7
Exatidão
9.1%
Média
82.7%
Imunologia
Acertos
3
Erros
2
Sem resposta
4
Exatidão
33.3%
Média
83.3%
Medicina Legal e Bioética
Acertos
1
Erros
2
Sem resposta
2
Exatidão
20.0%
Média
68.4%
Nefrologia
Acertos
3
Erros
3
Sem resposta
8
Exatidão
21.4%
Média
84.8%
Neurologia
Acertos
4
Erros
5
Sem resposta
11
Exatidão
20.0%
Média
77.3%
Oftalmologia
Acertos
0
Erros
1
Sem resposta
4
Exatidão
0.0%
Média
74.2%
Oncologia Médica
Acertos
4
Erros
7
Sem resposta
14
Exatidão
16.0%
Média
87.2%
ORL
Acertos
0
Erros
2
Sem resposta
6
Exatidão
0.0%
Média
74.8%
Pediatria
Acertos
7
Erros
6
Sem resposta
13
Exatidão
26.9%
Média
71.9%
Planeamento e Gestão em Saúde
Acertos
0
Erros
0
Sem resposta
2
Exatidão
0.0%
Média
82.6%
Pneumologia
Acertos
4
Erros
5
Sem resposta
5
Exatidão
28.6%
Média
80.4%
Psiquiatria
Acertos
4
Erros
0
Sem resposta
4
Exatidão
50.0%
Média
83.0%
Radiologia-Urgências
Acertos
4
Erros
4
Sem resposta
6
Exatidão
28.6%
Média
69.4%
Reumatologia
Acertos
3
Erros
5
Sem resposta
7
Exatidão
20.0%
Média
76.6%
Traumatologia
Acertos
2
Erros
5
Sem resposta
11
Exatidão
11.1%
Média
79.3%
Urologia
Acertos
1
Erros
2
Sem resposta
4
Exatidão
14.3%
Média
80.7%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
1
Erros
0
Sem resposta
6
Exatidão
14.3%
Média
78.6%
Bioestatística
Acertos
0
Erros
2
Sem resposta
2
Exatidão
0.0%
Média
79.8%
Diagnóstico
Acertos
19
Erros
22
Sem resposta
47
Exatidão
21.6%
Média
79.9%
Epidemiologia
Acertos
1
Erros
1
Sem resposta
3
Exatidão
20.0%
Média
76.7%
Ética
Acertos
0
Erros
1
Sem resposta
2
Exatidão
0.0%
Média
74.1%
Exames
Acertos
6
Erros
8
Sem resposta
13
Exatidão
22.2%
Média
77.9%
Farmacologia
Acertos
8
Erros
0
Sem resposta
5
Exatidão
61.5%
Média
83.3%
Fisiopatologia
Acertos
4
Erros
10
Sem resposta
13
Exatidão
14.8%
Média
76.1%
Interpretação
Acertos
5
Erros
11
Sem resposta
26
Exatidão
11.9%
Média
70.7%
Legal
Acertos
1
Erros
2
Sem resposta
1
Exatidão
25.0%
Média
64.6%
Prevenção
Acertos
4
Erros
2
Sem resposta
6
Exatidão
33.3%
Média
75.6%
Prognóstico
Acertos
3
Erros
1
Sem resposta
3
Exatidão
42.9%
Média
80.8%
Risco
Acertos
1
Erros
2
Sem resposta
2
Exatidão
20.0%
Média
85.2%
Tratamento
Acertos
20
Erros
17
Sem resposta
44
Exatidão
24.7%
Média
77.3%
#RespostaCorretaEstado
1—B
2—A
3DC
4AB
5—A
6—C
7—C
8BA
9—A
10—D
11—D
12—D
13AB
14BD
15D—Anulada
16—B
17—B
18AA
19CC
20DA
21CB
22—D
23AC
24BD
25CC
26——Anulada
27—C
28C—Anulada
29—D
30CB
31AD
32—A
33—D
34AD
35BB
36BD
37—C
38—C
39CD
40BA
41—D
42—C
43—B
44—D
45BD
46AA
47—A
48AA
49—D
50—B
51DC
52—B
53—D
54DB
55—A
56——Anulada
57—C
58—B
59—D
60BA
61AA
62CD
63BB
64—D
65—A
66AA
67BB
68—B
69—B
70AA
71DD
72AA
73—D
74—C
75AA
76BB
77—B
78—B
79BC
80—C
81—C
82—D
83BB
84BD
85—C
86—C
87—A
88AD
89BB
90DA
91—B
92—C
93—B
94—C
95CA
96CC
97—D
98—C
99—A
100—C
101—B
102—D
103—A
104CC
105—A
106—C
107—B
108—D
109—B
110CC
111—A
112BC
113AB
114DD
115CD
116—C
117AA
118DD
119—C
120BB
121—D
122CC
123—C
124AC
125BD
126—D
127—B
128DD
129BA
130—D
131DD
132—A
133—B
134—C
135—B
136AC
137AA
138—D
139DD
140CB
141AA
142—A
143—B
144—B
145—D
146—C
147CB
148BA
149CA
150AD
151—A
152AA
153—B
154—B
155—B
156—C
157AA
158CC
159DC
160—A
161—A
162B—Anulada
163DD
164—C
165—A
166—B
167—C
168—D
169—B
170—B
171CC
172AA
173—A
174BB
175AB
176—C
177—C
178BA
179—D
180AA
181AB
182—C
183DB
184—B
185BB
186——Anulada
187—C
188DD
189BD
190BA
191CB
192—A
193CC
194—A
195—A
196AA
197—B
198DC
199DD
200—C
201CB
202—A
203—D
204CC
205BB
206DD
207—A
208—C
209CC
210—B