MedicalBenchmark
NVIDIA: Llama 3.1 Nemotron Ultra 253B v1 provider

Llama 3.1 Nemotron Ultra 253B v1

173

#173 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

496.33 pts

Exatidão

86.8%

Corretas / Incorretas

521 / 74

Custo total

$0.77

Desempenho Geral

(vs. média)
Exatidão

86.8%

avg: 80.6%

Pontuação líquida

496.33 pts

avg: 453.30 pts

Acertos

521

avg: 483

Erros

74

avg: 90

Custo total

$0.77

avg: $9.58

Tempo médio de resposta

12.9s

avg: 17.9s

Tokens de saída

330K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

98.8%

avg: 95.4%

Desagregação por Exame

MIR 2024
174
Corretas
176
Incorretas
22
Exatidão
88.0%
Pontuação líquida
168.66
MIR 2025
186
Corretas
166
Incorretas
32
Exatidão
83.0%
Pontuação líquida
155.33
MIR 2026
154
Corretas
179
Incorretas
20
Exatidão
89.5%
Pontuação líquida
172.33