MedicalBenchmark
Nous: Hermes 3 405B Instruct provider

Hermes 3 405B Instruct

192

#192 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

480.66 pts

Exatidão

84.2%

Corretas / Incorretas

505 / 73

Custo total

$0.49

Desempenho Geral

(vs. média)
Exatidão

84.2%

avg: 80.6%

Pontuação líquida

480.66 pts

avg: 453.30 pts

Acertos

505

avg: 483

Erros

73

avg: 90

Custo total

$0.49

avg: $9.58

Tempo médio de resposta

22.8s

avg: 17.9s

Tokens de saída

196K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

96.0%

avg: 95.4%

Desagregação por Exame

MIR 2024
181
Corretas
175
Incorretas
21
Exatidão
87.5%
Pontuação líquida
168.00
MIR 2025
193
Corretas
162
Incorretas
28
Exatidão
81.0%
Pontuação líquida
152.66
MIR 2026
205
Corretas
168
Incorretas
24
Exatidão
84.0%
Pontuação líquida
160.00