MedicalBenchmark
NousResearch: Hermes 2 Pro - Llama-3 8B provider

Hermes 2 Pro - Llama-3 8B

302

#302 de 319 models al ranking general

Rendiment acumulat en 3 exàmens MIR

Puntuació neta

146.33 pts

Certesa

40.3%

Correctes / Incorrectes

242 / 287

Cost total

$0.08

Rendiment General

(vs. mitjana)
Certesa

40.3%

avg: 80.6%

Puntuació neta

146.33 pts

avg: 453.30 pts

Encerts

242

avg: 483

Errors

287

avg: 90

Cost total

$0.08

avg: $9.58

Temps mitjà de resposta

4.1s

avg: 17.9s

Tokens sortints

268K

avg: 1.3M

Tokens de raonament

0

avg: 898K

Confiança mitjana

84.5%

avg: 95.4%

Desglossament per Examen

MIR 2024
309
Correctes
72
Incorrectes
105
Certesa
36.0%
Puntuació neta
37.00
MIR 2025
298
Correctes
78
Incorrectes
101
Certesa
39.0%
Puntuació neta
44.33
MIR 2026
298
Correctes
92
Incorrectes
81
Certesa
46.0%
Puntuació neta
65.00