MedicalBenchmark
NVIDIA: Llama 3.1 Nemotron 70B Instruct provider

Llama 3.1 Nemotron 70B Instruct

194

#194 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

478.66 pts

Exatidão

84.2%

Corretas / Incorretas

505 / 79

Custo total

$0.87

Desempenho Geral

(vs. média)
Exatidão

84.2%

avg: 80.6%

Pontuação líquida

478.66 pts

avg: 453.30 pts

Acertos

505

avg: 483

Erros

79

avg: 90

Custo total

$0.87

avg: $9.58

Tempo médio de resposta

14.4s

avg: 17.9s

Tokens de saída

432K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

96.1%

avg: 95.4%

Desagregação por Exame

MIR 2024
214
Corretas
165
Incorretas
30
Exatidão
82.5%
Pontuação líquida
155.00
MIR 2025
206
Corretas
160
Incorretas
33
Exatidão
80.0%
Pontuação líquida
149.00
MIR 2026
145
Corretas
180
Incorretas
16
Exatidão
90.0%
Pontuação líquida
174.66