MedicalBenchmark
Nous: Hermes 3 70B Instruct provider

Hermes 3 70B Instruct

289

#289 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

187.33 pts

Exatidão

40.3%

Corretas / Incorretas

242 / 164

Custo total

$1.62

Desempenho Geral

(vs. média)
Exatidão

40.3%

avg: 80.6%

Pontuação líquida

187.33 pts

avg: 453.30 pts

Acertos

242

avg: 483

Erros

164

avg: 90

Custo total

$1.62

avg: $9.58

Tempo médio de resposta

172.1s

avg: 17.9s

Tokens de saída

5.1M

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

63.7%

avg: 95.4%

Desagregação por Exame

MIR 2024
293
Corretas
78
Incorretas
57
Exatidão
39.0%
Pontuação líquida
59.00
MIR 2025
283
Corretas
88
Incorretas
51
Exatidão
44.0%
Pontuação líquida
71.00
MIR 2026
303
Corretas
76
Incorretas
56
Exatidão
38.0%
Pontuação líquida
57.33