MedicalBenchmark
NousResearch: Hermes 2 Pro - Llama-3 8B provider

Hermes 2 Pro - Llama-3 8B

298

#298 de 319 modelos — MIR 2026

Pontuação líquida

65.00 pts

Exatidão

46.0%

Corretas / Incorretas

92 / 81

Custo total

$0.03

Desempenho Geral

(vs. média)
Exatidão

46.0%

avg: 82.4%

Pontuação líquida

65.00 pts

avg: 156.14 pts

Acertos

92

avg: 165

Erros

81

avg: 26

Custo total

$0.03

avg: $3.12

Tempo médio de resposta

4.3s

avg: 17.4s

Tokens de saída

94K

avg: 415K

Tokens de raciocínio

0

avg: 295K

Confiança média

83.6%

avg: 95.4%

Desagregação por Disciplina

Alergologia
Acertos
1
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
96.9%
Anestesiologia e Reanimação
Acertos
1
Erros
4
Sem resposta
2
Exatidão
14.3%
Média
71.0%
Cardiologia
Acertos
9
Erros
14
Sem resposta
2
Exatidão
36.0%
Média
78.4%
Cuidados Paliativos
Acertos
3
Erros
1
Sem resposta
2
Exatidão
50.0%
Média
80.8%
Dermatologia
Acertos
5
Erros
4
Sem resposta
2
Exatidão
45.5%
Média
73.2%
Doenças Infecciosas
Acertos
6
Erros
5
Sem resposta
3
Exatidão
42.9%
Média
79.0%
Endocrinologia e Nutrição
Acertos
8
Erros
5
Sem resposta
2
Exatidão
53.3%
Média
84.7%
Epidemiologia
Acertos
4
Erros
3
Sem resposta
0
Exatidão
57.1%
Média
81.3%
Estatística
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
84.5%
Farmacologia
Acertos
3
Erros
5
Sem resposta
3
Exatidão
27.3%
Média
79.6%
Gastrenterologia
Acertos
14
Erros
11
Sem resposta
5
Exatidão
46.7%
Média
80.2%
Genética
Acertos
3
Erros
6
Sem resposta
2
Exatidão
27.3%
Média
79.7%
Geriatria
Acertos
5
Erros
6
Sem resposta
2
Exatidão
38.5%
Média
83.7%
Ginecologia e Obstetrícia
Acertos
5
Erros
5
Sem resposta
2
Exatidão
41.7%
Média
85.2%
Hematologia
Acertos
3
Erros
3
Sem resposta
3
Exatidão
33.3%
Média
77.6%
Imunologia
Acertos
4
Erros
2
Sem resposta
0
Exatidão
66.7%
Média
91.8%
Medicina Legal e Bioética
Acertos
8
Erros
1
Sem resposta
2
Exatidão
72.7%
Média
83.4%
Nefrologia
Acertos
5
Erros
3
Sem resposta
2
Exatidão
50.0%
Média
85.6%
Neurologia
Acertos
7
Erros
6
Sem resposta
0
Exatidão
53.8%
Média
89.0%
Oftalmologia
Acertos
4
Erros
1
Sem resposta
0
Exatidão
80.0%
Média
84.5%
Oncologia Médica
Acertos
10
Erros
10
Sem resposta
3
Exatidão
43.5%
Média
83.7%
ORL
Acertos
6
Erros
1
Sem resposta
1
Exatidão
75.0%
Média
85.0%
Pediatria
Acertos
10
Erros
10
Sem resposta
2
Exatidão
45.5%
Média
88.1%
Planeamento e Gestão em Saúde
Acertos
5
Erros
1
Sem resposta
4
Exatidão
50.0%
Média
79.4%
Pneumologia
Acertos
7
Erros
7
Sem resposta
2
Exatidão
43.8%
Média
83.6%
Psiquiatria
Acertos
4
Erros
2
Sem resposta
2
Exatidão
50.0%
Média
88.4%
Radiologia-Urgências
Acertos
4
Erros
7
Sem resposta
2
Exatidão
30.8%
Média
69.4%
Reumatologia
Acertos
4
Erros
7
Sem resposta
0
Exatidão
36.4%
Média
89.0%
Traumatologia
Acertos
2
Erros
8
Sem resposta
1
Exatidão
18.2%
Média
66.6%
Urologia
Acertos
3
Erros
4
Sem resposta
1
Exatidão
37.5%
Média
83.1%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
83.4%
Bioestatística
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
84.5%
Diagnóstico
Acertos
36
Erros
37
Sem resposta
8
Exatidão
44.4%
Média
83.0%
Epidemiologia
Acertos
7
Erros
2
Sem resposta
0
Exatidão
77.8%
Média
89.1%
Ética
Acertos
5
Erros
1
Sem resposta
0
Exatidão
83.3%
Média
92.2%
Exames
Acertos
13
Erros
13
Sem resposta
7
Exatidão
39.4%
Média
81.2%
Farmacologia
Acertos
5
Erros
6
Sem resposta
4
Exatidão
33.3%
Média
83.1%
Fisiopatologia
Acertos
13
Erros
10
Sem resposta
3
Exatidão
50.0%
Média
85.0%
Interpretação
Acertos
14
Erros
17
Sem resposta
6
Exatidão
37.8%
Média
73.2%
Legal
Acertos
6
Erros
0
Sem resposta
3
Exatidão
66.7%
Média
82.9%
Prevenção
Acertos
6
Erros
8
Sem resposta
2
Exatidão
37.5%
Média
81.5%
Prognóstico
Acertos
3
Erros
2
Sem resposta
0
Exatidão
60.0%
Média
93.2%
Risco
Acertos
7
Erros
7
Sem resposta
1
Exatidão
46.7%
Média
85.0%
Tratamento
Acertos
29
Erros
32
Sem resposta
11
Exatidão
40.3%
Média
80.9%
#RespostaCorretaEstado
1BA
2CB
3AD
4CD
5BB
6AC
7AB
8BD
9—D
10AA
11CB
12BA
13D—Anulada
14AC
15DA
16CC
17CC
18BD
19BB
20—B
21BB
22CC
23BB
24—A
25CC
26DA
27BB
28DD
29DA
30DD
31AC
32CC
33AB
34BB
35DC
36BD
37—D
38AA
39—C
40AA
41—D
42BA
43BB
44DB
45BB
46BB
47DD
48CC
49CC
50——Anulada
51BA
52CC
53DC
54AC
55CA
56CA
57—A
58—A
59AB
60BB
61—C
62BB
63DB
64——Anulada
65BC
66—C
67CC
68BA
69CB
70BB
71BB
72BB
73BB
74AA
75CC
76CC
77DA
78DD
79CA
80DD
81CC
82DD
83BB
84AA
85BD
86—A
87DB
88AB
89DB
90CC
91DA
92CC
93DD
94AC
95AC
96AB
97DB
98AA
99BB
100CC
101CC
102AA
103CC
104DC
105BC
106BB
107CC
108BA
109AC
110AC
111—B
112CC
113—C
114BD
115CB
116DD
117—C
118AB
119DA
120AA
121AC
122BB
123DB
124CB
125BC
126BB
127—C
128—B
129—C
130CC
131BB
132AB
133AC
134BB
135CC
136CB
137—D
138BB
139——Anulada
140—D
141AA
142A—Anulada
143—A
144CD
145—C
146BC
147BB
148CC
149BB
150—B
151BB
152CC
153BC
154CD
155BB
156BA
157DD
158DB
159AC
160AA
161——Anulada
162AA
163—C
164AC
165BA
166AA
167DD
168CC
169BB
170AB
171AA
172—B
173DD
174AC
175BB
176DA
177CD
178DD
179AB
180DC
181DB
182CC
183AD
184DD
185DB
186DD
187DD
188CC
189CC
190—B
191DD
192BD
193CC
194BC
195DD
196BA
197BC
198—A
199DB
200DD
201CC
202BA
203AA
204CC
205BB
206—C
207CA
208C—Anulada
209—B
210CC