MedicalBenchmark
NousResearch: Hermes 2 Pro - Llama-3 8B provider

Hermes 2 Pro - Llama-3 8B

270

#270 de 290 modelosMIR 2026

Pontuação líquida

65.00 pts

Exatidão

46.0%

Corretas / Incorretas

92 / 81

Custo total

$0.03

Desempenho Geral

(vs. média)
Exatidão

46.0%

avg: 81.6%

Pontuação líquida

65.00 pts

avg: 154.00 pts

Acertos

92

avg: 163

Erros

81

avg: 28

Custo total

$0.03

avg: $3.33

Tempo médio de resposta

4.3s

avg: 16.2s

Tokens de saída

94K

avg: 430K

Tokens de raciocínio

0

avg: 310K

Confiança média

83.6%

avg: 95.1%

Desagregação por Disciplina

Alergologia
Acertos
1
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
96.9%
Anestesiologia e Reanimação
Acertos
1
Erros
4
Sem resposta
2
Exatidão
14.3%
Média
69.6%
Cardiologia
Acertos
9
Erros
14
Sem resposta
2
Exatidão
36.0%
Média
77.3%
Cuidados Paliativos
Acertos
3
Erros
1
Sem resposta
2
Exatidão
50.0%
Média
80.2%
Dermatologia
Acertos
5
Erros
4
Sem resposta
2
Exatidão
45.5%
Média
72.3%
Doenças Infecciosas
Acertos
6
Erros
5
Sem resposta
3
Exatidão
42.9%
Média
77.9%
Endocrinologia e Nutrição
Acertos
8
Erros
5
Sem resposta
2
Exatidão
53.3%
Média
84.0%
Epidemiologia
Acertos
4
Erros
3
Sem resposta
0
Exatidão
57.1%
Média
80.2%
Estatística
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
83.8%
Farmacologia
Acertos
3
Erros
5
Sem resposta
3
Exatidão
27.3%
Média
78.6%
Gastrenterologia
Acertos
14
Erros
11
Sem resposta
5
Exatidão
46.7%
Média
79.3%
Genética
Acertos
3
Erros
6
Sem resposta
2
Exatidão
27.3%
Média
78.7%
Geriatria
Acertos
5
Erros
6
Sem resposta
2
Exatidão
38.5%
Média
83.0%
Ginecologia e Obstetrícia
Acertos
5
Erros
5
Sem resposta
2
Exatidão
41.7%
Média
84.3%
Hematologia
Acertos
3
Erros
3
Sem resposta
3
Exatidão
33.3%
Média
76.6%
Imunologia
Acertos
4
Erros
2
Sem resposta
0
Exatidão
66.7%
Média
91.4%
Medicina Legal e Bioética
Acertos
8
Erros
1
Sem resposta
2
Exatidão
72.7%
Média
82.9%
Nefrologia
Acertos
5
Erros
3
Sem resposta
2
Exatidão
50.0%
Média
85.1%
Neurologia
Acertos
7
Erros
6
Sem resposta
0
Exatidão
53.8%
Média
88.6%
Oftalmologia
Acertos
4
Erros
1
Sem resposta
0
Exatidão
80.0%
Média
83.7%
Oncologia Médica
Acertos
10
Erros
10
Sem resposta
3
Exatidão
43.5%
Média
83.0%
ORL
Acertos
6
Erros
1
Sem resposta
1
Exatidão
75.0%
Média
84.7%
Pediatria
Acertos
10
Erros
10
Sem resposta
2
Exatidão
45.5%
Média
87.6%
Planeamento e Gestão em Saúde
Acertos
5
Erros
1
Sem resposta
4
Exatidão
50.0%
Média
78.4%
Pneumologia
Acertos
7
Erros
7
Sem resposta
2
Exatidão
43.8%
Média
82.8%
Psiquiatria
Acertos
4
Erros
2
Sem resposta
2
Exatidão
50.0%
Média
87.9%
Radiologia-Urgências
Acertos
4
Erros
7
Sem resposta
2
Exatidão
30.8%
Média
67.7%
Reumatologia
Acertos
4
Erros
7
Sem resposta
0
Exatidão
36.4%
Média
88.4%
Traumatologia
Acertos
2
Erros
8
Sem resposta
1
Exatidão
18.2%
Média
65.2%
Urologia
Acertos
3
Erros
4
Sem resposta
1
Exatidão
37.5%
Média
82.5%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
82.6%
Bioestatística
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
83.8%
Diagnóstico
Acertos
36
Erros
37
Sem resposta
8
Exatidão
44.4%
Média
82.2%
Epidemiologia
Acertos
7
Erros
2
Sem resposta
0
Exatidão
77.8%
Média
88.7%
Ética
Acertos
5
Erros
1
Sem resposta
0
Exatidão
83.3%
Média
92.0%
Exames
Acertos
13
Erros
13
Sem resposta
7
Exatidão
39.4%
Média
80.3%
Farmacologia
Acertos
5
Erros
6
Sem resposta
4
Exatidão
33.3%
Média
82.3%
Fisiopatologia
Acertos
13
Erros
10
Sem resposta
3
Exatidão
50.0%
Média
84.3%
Interpretação
Acertos
14
Erros
17
Sem resposta
6
Exatidão
37.8%
Média
72.0%
Legal
Acertos
6
Erros
0
Sem resposta
3
Exatidão
66.7%
Média
82.4%
Prevenção
Acertos
6
Erros
8
Sem resposta
2
Exatidão
37.5%
Média
80.6%
Prognóstico
Acertos
3
Erros
2
Sem resposta
0
Exatidão
60.0%
Média
93.2%
Risco
Acertos
7
Erros
7
Sem resposta
1
Exatidão
46.7%
Média
84.3%
Tratamento
Acertos
29
Erros
32
Sem resposta
11
Exatidão
40.3%
Média
80.1%
#RespostaCorretaEstado
1BA
2CB
3AD
4CD
5BB
6AC
7AB
8BD
9D
10AA
11CB
12BA
13DAnulada
14AC
15DA
16CC
17CC
18BD
19BB
20B
21BB
22CC
23BB
24A
25CC
26DA
27BB
28DD
29DA
30DD
31AC
32CC
33AB
34BB
35DC
36BD
37D
38AA
39C
40AA
41D
42BA
43BB
44DB
45BB
46BB
47DD
48CC
49CC
50Anulada
51BA
52CC
53DC
54AC
55CA
56CA
57A
58A
59AB
60BB
61C
62BB
63DB
64Anulada
65BC
66C
67CC
68BA
69CB
70BB
71BB
72BB
73BB
74AA
75CC
76CC
77DA
78DD
79CA
80DD
81CC
82DD
83BB
84AA
85BD
86A
87DB
88AB
89DB
90CC
91DA
92CC
93DD
94AC
95AC
96AB
97DB
98AA
99BB
100CC
101CC
102AA
103CC
104DC
105BC
106BB
107CC
108BA
109AC
110AC
111B
112CC
113C
114BD
115CB
116DD
117C
118AB
119DA
120AA
121AC
122BB
123DB
124CB
125BC
126BB
127C
128B
129C
130CC
131BB
132AB
133AC
134BB
135CC
136CB
137D
138BB
139Anulada
140D
141AA
142AAnulada
143A
144CD
145C
146BC
147BB
148CC
149BB
150B
151BB
152CC
153BC
154CD
155BB
156BA
157DD
158DB
159AC
160AA
161Anulada
162AA
163C
164AC
165BA
166AA
167DD
168CC
169BB
170AB
171AA
172B
173DD
174AC
175BB
176DA
177CD
178DD
179AB
180DC
181DB
182CC
183AD
184DD
185DB
186DD
187DD
188CC
189CC
190B
191DD
192BD
193CC
194BC
195DD
196BA
197BC
198A
199DB
200DD
201CC
202BA
203AA
204CC
205BB
206C
207CA
208CAnulada
209B
210CC