MedicalBenchmark
NeverSleep: Lumimaid v0.2 8B provider

Lumimaid v0.2 8B

306

#306 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

117.66 pts

Exatidão

38.7%

Corretas / Incorretas

232 / 343

Custo total

$0.13

Desempenho Geral

(vs. média)
Exatidão

38.7%

avg: 80.6%

Pontuação líquida

117.66 pts

avg: 453.30 pts

Acertos

232

avg: 483

Erros

343

avg: 90

Custo total

$0.13

avg: $9.58

Tempo médio de resposta

4.2s

avg: 17.9s

Tokens de saída

179K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

94.6%

avg: 95.4%

Desagregação por Exame

MIR 2024
304
Corretas
77
Incorretas
111
Exatidão
38.5%
Pontuação líquida
40.00
MIR 2025
306
Corretas
69
Incorretas
125
Exatidão
34.5%
Pontuação líquida
27.33
MIR 2026
308
Corretas
86
Incorretas
107
Exatidão
43.0%
Pontuação líquida
50.33